Google에 URL 재크롤링 요청하기

최근 사이트에서 페이지를 추가하거나 변경한 경우 다음 중 한 가지 방법을 사용하여 Google에 페이지의 색인을 다시 생성하도록 요청할 수 있습니다.

일반 가이드라인

  • 크롤링은 며칠에서 몇 주까지 걸릴 수 있습니다. 크롤링이 완료될 때까지 기다리는 동안 색인 상태 보고서 또는 URL 검사 도구를 사용하여 진행 상황을 모니터링하세요.
  • 여기에서 설명하는 방법은 응답을 받는 데 걸리는 시간이 모두 비슷합니다.
  • 개별 URL을 제출하는 데는 제한이 적용됩니다.
  • 같은 URL이나 사이트맵의 재크롤링을 여러 번 요청해도 크롤링 일정이 앞당겨지지는 않습니다.

크롤링 요청 방법

URL 검사 도구 사용(소수의 URL을 제출하는 경우)

URL 검사 도구를 사용하여 개별 URL의 크롤링을 요청할 수 있습니다. URL이 많으면 도구를 사용하는 대신 사이트맵을 제출해야 합니다.

색인에 URL을 제출하려면 다음 단계를 따르세요.

  1. 위의 일반 가이드라인을 읽어 봅니다.
  2. URL 검사 도구를 사용하여 URL을 검사합니다.
  3. 색인 생성 요청을 선택합니다. 이 도구를 사용하면 URL에서 실시간 테스트를 실행하여 명백한 색인 생성 문제가 있는지 확인할 수 있고, 문제가 없으면 페이지가 색인 생성 대기열에 추가됩니다. 도구가 페이지의 문제를 발견하면 문제를 해결해야 합니다.

참고: 크롤링을 요청해도 즉시 또는 전혀 Google 검색결과에 포함되지 않을 수 있습니다. Google 시스템은 고품질의 유용한 콘텐츠를 빠르게 포함하는 것을 최우선으로 생각합니다.

사이트맵 제출(한 번에 여러 URL을 제출하는 경우)

사이트맵은 Google에서 사이트의 URL을 발견할 수 있는 중요한 방법입니다. 사이트맵에는 대체 언어 버전 및 동영상, 이미지, 뉴스별 페이지에 관한 추가 메타데이터도 포함될 수 있습니다. 사이트맵 만드는 방법 알아보기

Google에서 마지막으로 크롤링한 이후로 사이트맵을 변경하지 않았다면 사이트맵을 다시 제출해도 추가적인 혜택은 없습니다. 사이트맵에서 페이지를 업데이트한 경우 <lastmod>로 표시해야 합니다.

다음과 같은 몇 가지 방법으로 Google에 사이트맵에 관해 알릴 수 있습니다.

  • 사이트맵 보고서를 사용하여 사이트맵을 제출합니다.
  • 핑 도구를 사용합니다. 브라우저나 명령줄에서 이 주소로 GET 요청을 보내 사이트맵의 전체 URL을 지정합니다. 사이트맵 파일에 액세스할 수 있는지 확인합니다.
    http://www.google.com/ping?sitemap=<full_URL_of_sitemap>
    예:
    http://www.google.com/ping?sitemap=https://example.com/sitemap.xml
  • robots.txt 파일의 아무 곳에나 다음 줄을 삽입하여 사이트맵 경로를 지정합니다. 이렇게 하면, 다음에 Google에서 사이트를 크롤링할 때 사이트맵을 찾을 수 있습니다.
    Sitemap: http://example.com/my_sitemap.xml