발견됨 - 현재 색인이 생성되지 않음
제 사이트의 모든 게시판 글이 위의 이유로 사이트 색인에서 제외되었습니다.
검색으로 저 원인이 일어나는 이유를 알아봤는데 크롤링으로 인해 사이트에 무리가 갈수 있다고 크롤링을 연기한거라고 하던데.. 해결방법을 검색해봐도 제외된 페이지를 일일이 다 색인 요청을 하는 방법만 적혀있어서 그렇게 했는데 워낙 제외된 페이지가 많아서 하루에 할 수 있는 요청수를 넘어버렸다고 내일 다시 시도하라고 뜹니다.
구글에서 사이트맵 제출했고 문제없이 링크 다 받아오고 하는데도 색인이 생성되지 않는 이유가 궁금합니다.
원래 사이트에 올라오는 글 일일이 구글 서치콘솔에 찾아가서 색인 요청을 해야하는건가요? 초보라서 모르는게 많습니다.. 알고계신다면 답글 부탁드립니다.
구글에서 크롤링하여 색인을 할 것인지 아닌지 여부는 구글이 판단을 합니다. 네이버도 그렇구요.
네이버도 그렇고 구글도 다시 크롤링 요청을 할 수 있는 갯수는 하루에 굉장히 제한된 숫자만 제공합니다.
요청에 의해 처리할 수 있는 여지가 거의 없다고 보셔야 합니다. 이런 요청으로 다시 크롤링을 가능하게 하는 것은 급히 변경된 문서의 내용으로 다시 크롤링되어 색인이 교체되길 원할 경우나 사용하라는 의미죠.
구글도 그렇고 네이버도 그렇고 지금 말씀 하신 크롤링 해서 색인(자기들 검색자들에게 보여줄 곳에 포함시킬지)여부는 구글,네이버가 결정합니다.
원하시는 대로 모두 다 색인이 안될 수도 또 그 시기가 굉장히 빠르게 되지 않을 수도 있습니다.
대략 다른 사이트와 크게 다르지 않는 상황 같아 보입니다.
*사이트의 모든 문서가 그렇다면 다른 이야기 될 수 있겠습니다.
사이트의 오래된 문서 1개라도 색이된게 없는게 맞나요?
보다 많은 조언을 받고 싶다면 url을 공개하세요.