User-agent: * Disallow: /admin$ Disallow: /admin/ Disallow: /*?module=admin$ Disallow: /*?module=admin& Disallow: /*act=IS& Disallow: /*act=IS$ Disallow: /*search_keyword=*&search_target= Allow: /*search_keyword=*&search_target=*&document_srl= Disallow: /*search_target=*&search_keyword= Allow: /*search_target=*&search_keyword=*&document_srl= Sitemap: https://xetown.com/sitemap.xm
xetown은 이렇게 만들어져 있던데
사이트맵 도메인주소만 바꿔서 만들면 괜찮은가요?
사이트를 네이버웹마스터도구에 등록하려고 하는데 robots.txt 이 없다고 해서 어떻게 만들어야 하나 고민하다가
https://xetown.com/robots.txt 확인해 보니 위에 처럼 나와 있어서 따라하려고 합니다.
사이트 전체 게시글이 검색되길 원하는데 위에 내용에서 어떤 부분을 삭제해야 하는 부분이 있는지요?
