bot에 따른 홈페이지 상태 여부와 홈페이지 누락여부?

네이버의 어느 bot이 방문했냐에 따라서 현 홈페이지에 상태에 대해 알 수 있나요?

예를 들어 bot 방문이후 홈페이의 색인이 안된다거나 누락이 된다거나 등등

추가적으로 스팸성홈페이지, 유사문서등 외에 홈페이지가 누락될 이유가 있을까요?

디자인 유사성이 높은 홈페이지도 등록이 안되거나 삭제가 된다고 들었는데 이게 가능한건지...;

아시는분 답변좀 부탁드릴게요!