Robot.txt를 반대로 특정 페이지만 허용하려면 어떡해 작성하면 좋을까요?
-
Lv11 ?Lv6 특정 페이지만 허용하고 다른 곳은 다 허용하지 않으실거라면
User-agent: 허용할 웹봇
Allow: 웹봇이 접근할 수 있도록 허용할 경로
Disallow: /
이런 식으로 하시면 될 것입니다. -
?
Lv6 Lv11 흠.. Allow에 게시판 mid 적으면 되나요?
예를 들어 여기는 게시판 mid가 square이니까..
Allow: /square/ 하면 되나요? 2개 이상인 경우 Allow를 더 추가하고.. 맞나요?
Allow는 사실 폴더 명을 말하는 것 같은데.. 게시판 mid를 적어도 괜찮나.. -
Lv11 ?Lv6 ㅎㅎ 그렇군요. 그럼 팀워크님이 댓글에 작성하신대로 하심 될 듯 합니다. 참고로 해당 경로가 접근이 가능한지 가능하지 않은지 네이버 웹마스터도구 등에서 확인이 가능합니다. -
Lv16 http://www.robotstxt.org/robotstxt.html
로봇에 관한 사이트 링크했는데혹시 도움이 되지않을까해서 알려드리네요.
Allow: 경로
이런식으로 하시면 됩니다.