크롤링 및 색인 생성 주제 개요

이 섹션에 포함된 주제에서는 Google 검색 및 기타 Google 서비스에 콘텐츠를 표시하기 위해 콘텐츠를 찾고 파싱하는 Google의 기능을 제어하는 방법과 Google이 사이트의 특정 콘텐츠를 크롤링하지 못하게 하는 방법을 설명합니다.

다음은 각 페이지의 간략한 설명입니다. 전체 내용 읽어 보기

주제	설명
사이트맵 관리	사이트의 새 페이지 또는 업데이트된 페이지에 관해 Google에 알립니다.
콘텐츠 액세스 차단	Google이 사이트의 콘텐츠에 액세스하거나 Google 검색 또는 기타 Google 서비스에 콘텐츠를 표시하지 못하게 합니다. 필요에 따라 어떤 방법이 가장 적합한지 알아보세요.
Google에서 정보 삭제	Google에 표시되는 사이트 콘텐츠를 삭제합니다.
Google에 중복 콘텐츠 알리기	과도한 크롤링을 방지하기 위해 사이트에 있는 중복 페이지에 관해 Google에 알립니다. Google에서 중복 콘텐츠를 자동으로 감지하는 방법, 중복 콘텐츠를 처리하는 방법, 발견된 중복 페이지 그룹에 표준 페이지를 할당하는 방법을 알아보세요.
Google에 URL 재크롤링 요청	중요한 새 페이지 또는 업데이트된 페이지를 방금 게시했으며 Google에서 빠르게 찾도록 해야 합니다.
Googlebot이 차단되지 않았는지 확인	Google 검색에 표시하려는 사이트의 모든 페이지에 Google이 액세스할 수 있게 합니다.
맞춤 404 페이지 만들기	사용자뿐 아니라 Googlebot도 인식할 수 있는 맞춤 404 페이지를 제대로 만드는 방법을 알아봅니다.
사이트 전송, 이동 또는 이전	사이트를 한 도메인에서 다른 도메인으로 이동하는 경우 검색결과에서 혼란을 최소화하는 방법을 알아봅니다.
국제 및 다국어 사이트	사이트에 다른 언어로 된 콘텐츠가 있거나 지역마다 다른 콘텐츠를 제공하는 경우 Google에서 사이트를 파악하는 데 도움을 주는 방법을 알아봅니다.
Google에서 인식하는 특수 태그	Google에서는 검색 노출 및 동작을 제어하는 여러 태그 확장을 지원합니다.
Google 크롤러	Google에서 여러 작업에 사용하는 다양한 크롤러에 관한 정보입니다.
크롤링 통계 보고서	크롤링 통계 보고서에는 Google에서 사이트를 언제 얼마나 크롤링했는지 표시됩니다.
Googlebot 크롤링 속도 변경	드물지만 Google에서 사이트 크롤링 요청을 너무 많이 하는 경우에는 요청 속도를 늦추게 할 수 있습니다.