Как контролировать, какая информация с вашего сайта будет доступна Google

Существует множество способов, при помощи которых владельцы сайтов могут контролировать, какая информация будет показываться в результатах Google Поиска. Хотя большинство из них заинтересованы в том, чтобы их страницы попали в индекс, иногда важно добиться обратного: предотвратить появление контента в результатах Поиска. Есть несколько причин скрывать от Google представленный на сайте контент.

  • Ограничение доступа к данным. На вашем сайте может быть информация, которую вы хотите предоставлять только пользователям, уже зашедшим на ваш сайт. Вы можете запретить Google сканировать такие данные, чтобы они не появлялись в результатах поиска.
    Следует помнить, что некоторые файлы, размещенные на вашем сайте, могут содержать метаданные, которые, в свою очередь, могут показываться в результатах Поиска. Подробнее о том, как исключить из Google Поиска информацию, удаленную из документов
  • Сокрытие контента, имеющего низкую ценность для пользователей. На вашем сайте может быть контент низкого качества, который не должен появляться в результатах Поиска. Например, если на вашем сайте разрешено создание контента пользователями, часть этого контента может быть низкого качества или даже спамом. Индексирование такого контента может негативно сказаться на позициях вашего сайта в результатах поиска.
  • Обработка самого важного контента. Если у вас очень большой сайт с сотнями тысяч URL, то на ваших страницах может быть много второстепенного или повторяющегося контента. Советуем заблокировать менее важные страницы для роботов Google, чтобы наши системы сосредоточились на основных материалах.

Как блокировать доступ к контенту

Ниже перечислены основные способы, позволяющие предотвратить появление контента в результатах поиска Google.

Методы

Удаление контента с вашего сайта

Для всех типов контента

Это один из самых надежных способов предотвратить появление контента в Google Поиске и интернете в целом.

Защита файлов паролем

Для всех типов контента

Конфиденциальные материалы, размещенные на вашем сайте, следует защищать паролем, чтобы обеспечить доступ к ним ограниченному числу пользователей. Это также позволит предотвратить появление контента в результатах Google Поиска или, если он уже проиндексирован, удалить его из индекса.

Правило noindex

Для всех типов контента

Тег robots noindex (meta) представляет собой правило, указывающее Google, что контент не нужно индексировать или показывать в результатах поиска Google. Контент по-прежнему можно будет открыть по ссылкам, но в Google Поиске он перестанет появляться.

Запрет на сканирование при помощи файла robots.txt

Для изображений и видео

Google индексирует только те изображения и видео, которые разрешены для сканирования роботу Googlebot. Чтобы запретить роботу Googlebot доступ к медиафайлам, используйте правила robots.txt для блокирования файлов.

Запрет на показ контента в некоторых сервисах Google

Для веб-страниц

Вы можете запретить показ контента со своего сайта в определенных сервисах Google, например Google Покупки или поиск отелей и жилья для отпуска.

Запрет показа аннотаций страниц в Google для iOS

Для веб-страниц

Упомянутые на какой-либо веб-странице слова, темы, товары, места, имена и т. п. могут показываться в приложении Google для iOS как аннотации, на которые можно нажать. После нажатия пользователь видит результаты поиска по такому слову. Вы можете отключить показ таких аннотаций, если они относятся к вашим страницам. Для этого нужно заполнить форму отказа. В течение 30 дней после заполнения функция показа аннотаций будет отключена.

Форма для отказа находится здесь, и заполнить ее достаточно один раз.

Как удалять из Google существующий контент

Если контент вашего сайта уже появляется в Google, вы можете запросить удаление этих результатов поиска. Сведения о том, как удалить информацию из Google, можно найти на сайте Google Developers.