Robot.txt를 반대로 특정 페이지만 허용하려면 어떡해 작성하면 좋을까요?

  • ? Lv6
    User-agent: 허용할 웹봇
    Allow: 경로

    이런식으로 하시면 됩니다.
  • ? Lv6 Lv11
    Disallow만 안 적으면 되는건가요?
  • Lv11 ? Lv6
    특정 페이지만 허용하고 다른 곳은 다 허용하지 않으실거라면
    User-agent: 허용할 웹봇
    Allow: 웹봇이 접근할 수 있도록 허용할 경로
    Disallow: /
    이런 식으로 하시면 될 것입니다.
  • ? Lv6 Lv11
    감사합니다 :)
  • ? Lv6 Lv11

    흠.. Allow에 게시판 mid 적으면 되나요?
    예를 들어 여기는 게시판 mid가 square이니까..
    Allow: /square/ 하면 되나요? 2개 이상인 경우 Allow를 더 추가하고.. 맞나요?
    Allow는 사실 폴더 명을 말하는 것 같은데.. 게시판 mid를 적어도 괜찮나..

  • Lv11 ? Lv6
    글쎄요.. 그 부분과 관련해서는 잘 모르겠습니다. 그런 짧은 주소 말고도 index.php?mid={mid}가 있으니.. XE에선 좀 복잡할 듯 싶네요.
  • ? Lv6 Lv11
    흠.. 저는 그렇게 노출되는 걸 안 좋아하고 구글에 악 영향을 준다고 해서 아예 ?가 들어간 주소는 차단했는걸요 ㅎㅎ
  • Lv11 ? Lv6
    ㅎㅎ 그렇군요. 그럼 팀워크님이 댓글에 작성하신대로 하심 될 듯 합니다. 참고로 해당 경로가 접근이 가능한지 가능하지 않은지 네이버 웹마스터도구 등에서 확인이 가능합니다.
  • ? Lv6 Lv11
    구글 노출에 집중하고 있어서 ㅠㅠ 네이버 역시 해야 하는데..
    답변 너무 감사합니다 :)
  • Lv16

    http://www.robotstxt.org/robotstxt.html

    로봇에 관한 사이트 링크했는데 

    혹시 도움이 되지않을까해서 알려드리네요.

  • Lv16 Lv11
    홍, 감사합니다 :)