네이버 웹마스터에 보면 수집 오류 페이지를 볼수 있는곳이있는데
아래와 같은 주소들이 종종 오류페이지로 올라옵니다
전부 procFileDownload 관련 인데
제가 이미 robots.txt 파일에 아래형식으로 봇들이 접근못하도록
금지 등록을 해둔상태인데
Disallow: /?module=file&act=procFileDownload&
Disallow: /?module=file&act=procFileDownload$
Disallow: /*act=procFileDownload$
Disallow: /*act=procFileDownload&
뭐가 문제일까요?
혹시 아래처럼 마지막에 (*)을 추가 해야될까요??
Disallow: /*act=procFileDownload*