Как контролировать, какая информация с вашего сайта будет доступна Google
Существует множество способов, при помощи которых владельцы сайтов могут контролировать, какая информация будет показываться в результатах Google Поиска. Хотя большинство из них заинтересованы в том, чтобы их страницы попали в индекс, иногда важно добиться обратного: предотвратить появление контента в результатах Поиска. Есть несколько причин скрывать от Google представленный на сайте контент.
-
Ограничение доступа к данным. На вашем сайте может быть информация, которую вы хотите предоставлять только пользователям, уже зашедшим на ваш сайт. Вы можете запретить Google сканировать такие данные, чтобы они не появлялись в результатах поиска.
Следует помнить, что некоторые файлы, размещенные на вашем сайте, могут содержать метаданные, которые, в свою очередь, могут показываться в результатах Поиска. Подробнее о том, как исключить из Google Поиска информацию, удаленную из документов… - Сокрытие контента, имеющего низкую ценность для пользователей. На вашем сайте может быть контент низкого качества, который не должен появляться в результатах Поиска. Например, если на вашем сайте разрешено создание контента пользователями, часть этого контента может быть низкого качества или даже спамом. Индексирование такого контента может негативно сказаться на позициях вашего сайта в результатах поиска.
- Обработка самого важного контента. Если у вас очень большой сайт с сотнями тысяч URL, то на ваших страницах может быть много второстепенного или повторяющегося контента. Советуем заблокировать менее важные страницы для роботов Google, чтобы наши системы сосредоточились на основных материалах.
Как блокировать доступ к контенту
Ниже перечислены основные способы, позволяющие предотвратить появление контента в результатах поиска Google.
| Методы | |
|---|---|
Удаление контента с вашего сайта |
Для всех типов контента Это один из самых надежных способов предотвратить появление контента в Google Поиске и интернете в целом. |
Защита файлов паролем |
Для всех типов контента Конфиденциальные материалы, размещенные на вашем сайте, следует защищать паролем, чтобы обеспечить доступ к ним ограниченному числу пользователей. Это также позволит предотвратить появление контента в результатах Google Поиска или, если он уже проиндексирован, удалить его из индекса. |
Правило noindex |
Для всех типов контента
Тег robots |
Запрет на сканирование при помощи файла robots.txt |
Для изображений и видео Google индексирует только те изображения и видео, которые разрешены для сканирования роботу Googlebot. Чтобы запретить роботу Googlebot доступ к медиафайлам, используйте правила robots.txt для блокирования файлов. |
| Запрет на показ контента в некоторых сервисах Google |
Для веб-страниц Вы можете запретить показ контента со своего сайта не во всех, а только в некоторых сервисах Google, таких как Google Покупки или поиск отелей и жилья для отпуска. |
| Запрет показа аннотаций страниц в Google для iOS |
Для веб-страниц Упомянутые на какой-либо веб-странице слова, темы, товары, места, имена и т. п. могут показываться в приложении Google для iOS как аннотации, на которые можно нажать. После нажатия пользователь видит результаты поиска по такому слову. Вы можете отключить показ таких аннотаций, если они относятся к вашим страницам. Для этого нужно заполнить форму отказа. В течение 30 дней после ее отправки функция показа аннотаций будет отключена для ваших страниц. Форма для отказа находится здесь, и заполнить ее достаточно один раз. |
Как удалять из Google существующий контент
Если контент вашего сайта уже появляется в Google, вы можете запросить удаление этих результатов поиска. Сведения о том, как удалить информацию из Google, можно найти на сайте Google Developers.