구글 담당자가 얘기하는 크롤링 빈도 올리는 방법
2025.02.08 00:43
좋아요 2
조회수 391
댓글 0
먼저 구글의 웹사이트 크롤링에 구글측 입장을 보겠습니다.
"일부 URL은 매일 크롤링할 것입니다. 일부 URL은 매주 있을 수 있습니다. 다른 URL은 몇 달에 한 번, 반년에 한 번 정도 있을 수도 있습니다."
“Some URLs we will crawl daily. Some URLs maybe weekly. Other URLs every couple of months, maybe even once every half year or so.”
그리고 크롤빈도가 떨어지는 원인에 대해서 존밀러씨가 얘기한 내용을 정리하면 다음과 같습니다.
”먼저 서버의 응답시간이 원인이다. 느린 서버를
사용하면 유저가 사이트를 방문할때 기다려야되는 것과 마찬가지로 구글봇의 크롤도 시간이걸린다.“
그리고 두번째로 사이트의 품질이 원인일 수 있다고 얘기합니다.
“Google이 많이 크롤하지 않는 것은 어째서인지, 또 하나의 큰 이유는, 그 Web 사이트의 전체적인 품질에, 납득하고 있지 않기 때문이다.
특히 새 사이트에서는 이 점에서 어려움을 겪을 수 있다.”
The other big reason why we don’t crawl a lot from websites is because we’re not convinced
about the quality overall.
So that’s something where, especially with newer sites, I see us sometimes struggle with that.
결과 크롤링 빈도를 올리기 위해서는 어떻게 해야될까요?
1.URL검사툴로 크롤링 요청하기
2.사이트맵 송신하기
3.크롤바젯을 높히기
크롤바젯을 올리는 방법
1)서버 응답 속도 높히기
2)사이트 품질 올리기(고품질 콘텐츠)
구글의 존 뮬러씨의 답변 영상
고품질 사이트를 만들기 위해서는 콘텐츠SEO는 물론이고 중복 콘텐츠를 피하는 url표준화, 사이트의 계층 구조정리등 복합적인 요소가 필요합니다.
이와 같은 작업내용은 SEO업계에서 테크니컬SEO라고 합니다.

모바일에서 작성되었습니다.
아직 등록된 댓글이 없습니다.
와쿠이님의 게시글에 첫번째 댓글을 남겨보세요.