사이트 접속자 로그를 보니까
DotBot등이 자주 보여서
시스템 설정 > 보안 > 로봇 user-agnet 에서 다음과 같이 했는데요. 이렇게 하면 막은건지 궁금합니다.
| PHP | PHP 7.3 |
|---|---|
| CMS | Rhymix 2.x |
-
Lv24 로봇으로 접속을 허용한다 크롤러로 허용한다는 옵션입니다 -
Lv5
Lv24 아마 완벽 차단하는건 아니고 이미지나 이런거 로딩 잘 안하도록 크롤러로 취급해주는 거일꺼예요.
실질적인 완벽 차단은 안될거고.. 그냥 트래픽 어느정도 문제가 되엇을때 저옵션을 쓰면될듯 하네요. -
Lv5 
Lv30 아닙니다. 이미 지정된 구들,네이버 봇과 동급으로 취급해 주는 것 일뿐 차단은 서버에서 하셔야 합니다.
저기로 편입시키면 봇에게 정확한 목록 페이지를 제공하지 않음 같은 부하경감 로직이 작동되도록 해주는 정도 입니다.
무식하게 크롤링하는 녀석 이라면 서버에서 아예 차단해야 합니다.
저기에 넣는 대상은 악성이 아닌 도움이 되는 봇 중 봇으로 분류되지 못한 녀석을 커스텀으로 넣어주는 겁니다.