서버운영하면서 제일 신경쓰이는 것이 국제트래픽이더군요.
전체 트래픽은 반에반도 사용을 못하고 있는 형편이지만 국제 트래픽은 걸핏하면 추가요금을 부담하게 되니 말입니다.
지난번 bat_bot 처리를 하고 나서 트래픽이 안정되어서 하루 100-400M 수준에서 유지가 되고 있었습니다.
그런데 오늘 확인해보니까 어제 하루에 무려 1.4기가가 소모되었네.
MRTG를 확인해보니까 오늘 현재 진행중입니다.
새로운 악성봇이 나타났나 봤더니 구글봇이 서버에 들어있는 한개 의 사이트를 아예 통복사하듯이 테러를 하고 있네요.
IP를 확인해보니까 구글이 맞습니다.
robots.txt에 crawl-delay를 설정해놨는데도 아예 쌩까는군요.
구글봇이고 뭐고 걍 차단했습니다.
바로 403이군요.
도대체 왜들 이러는 걸까요?
