抓取和索引编制主题概览

这部分介绍了如何控制 Google 对您内容的查找和解析以使其显示在 Google 搜索和其他 Google 产品和服务中，以及如何阻止 Google 抓取您网站上的特定内容。

以下是每个网页的简介。如需大致了解抓取和索引编制功能，请参阅我们的搜索运作方式指南。

主题
站点地图	将网站上新增或更新的网页告知 Google。
robots.txt	robots.txt 文件规定了搜索引擎抓取工具可以/无法请求抓取您网站上的哪些网页或文件。
元标记	Google 支持多种可控制搜索结果呈现和行为的标记扩展项。
抓取工具管理	请求 Google 重新抓取您的网址 减慢 Googlebot 的抓取速度 验证 Googlebot 面向大型网站所有者的抓取预算管理指南 Google 抓取工具
移除	控制与 Google 分享的内容 从 Google 搜索结果中移除托管在您网站上的网页 阻止托管在您网页上的图片显示在搜索结果中 通过 Search Console 选择停止在 Google 本地以及其他 Google 产品和服务中显示您的内容
重复内容	将您网站上的重复网页告知 Google，避免过度抓取。了解 Google 如何自动检测和处理重复内容，以及如何将规范网页分配到发现的重复网页群组中。
网站迁移和变更	重定向和 Google 搜索 网站迁移 暂停或停用网站 软 404 错误
国际性网站和多语言网站	如果您的网站包含多种语言的内容，或者针对不同的地点显示不同的内容，请按相关说明帮助 Google 了解您的网站。
JavaScript 内容	在设计网页和应用时需要考虑一些差异和限制，以适应抓取工具访问和呈现您的内容的方式。