Часто задаваемые вопросы о сканировании и индексировании

В этой статье собраны ответы на вопросы о сканировании и индексировании, с которыми специалисты Google сталкиваются чаще всего.

Как добавить сайт в Google?

Новый сайт обычно проходит сканирование и индексирование не сразу. Срок его обработки зависит от многих факторов, поэтому мы не можем гарантировать, что ваши URL будут просканированы и проиндексированы к определенному времени. Проверяя в Search Console статус индексирования сайта, убедитесь, что вы подтвердили право собственности на версии как с префиксом www в URL, так и без него (например, www.example.com и example.com). Если вы отправляете информацию в Google с помощью файла Sitemap, это не значит, что сайт обязательно будет проиндексирован, а его позиции в результатах поиска повысятся.

Подробнее о том, как добавить сайт в Google…

Почему мой сайт не проиндексирован?

Если сайт не был проиндексирован, то причина чаще всего заключается в том, что он был опубликован совсем недавно. Подождите некоторое время или отправьте в Google запрос на сканирование и индексирование.

Вот ещё несколько возможных причин:

Другие сайты редко ссылаются на него.
Оформление сайта затрудняет сканирование и индексирование. Также может быть, что сайт непосредственно блокирует эти действия.
Во время сканирования сайт мог быть временно недоступен. В этом случае в Search Console появится информация об ошибках сканирования.
Сайт не соответствует нашему своду правил Главное о Поиске, был взломан или иным образом изменен третьими лицами.
В редких случаях причина может быть в том, что ранее на вашем сайте размещался контент, который вызывал проблемы. Если это так, то мы советуем запросить повторную проверку, указав, что у домена появился новый владелец, а контент был изменен.
Вы недавно перевели сайт на новый адрес, но не следовали нашим инструкциям по переносу сайтов.
Предыдущий владелец или другой пользователь с доступом к сайту подал в Search Console запрос на удаление сайта из результатов поиска. Вы можете отменить такой запрос с помощью инструмента удаления URL.

Подробнее о том, почему страница может не быть представлена в Google Поиске…

В двух моих доменах размещен одинаковый контент. Как сообщить Google, что оба этих домена относятся к одному сайту?

Настройте переадресацию 301, чтобы перенаправить трафик из дополнительного домена в основной. Тогда Google будет неизменно искать ваши материалы в одном домене и корректно сканировать и индексировать их. Это же относится и к другим поисковым системам. При переадресации 301 корректно учитываются все критерии ранжирования (например, данные системы PageRank и ссылки на сайт с других ресурсов). Если вы планируете сменить домен, ознакомьтесь с нашими рекомендациями.

Что нужно предпринять, если у меня есть повторяющийся контент?

В большинстве случаев дублирование контента не считается нарушением правил Google в отношении спама. Рекомендуем прочитать статью с дополнительной информацией по этой теме. Если у вас остались вопросы, изучите следующие материалы:

Что лучше использовать – подпапки или субдомены?

Выбирайте структуру, удобную для вас. С точки зрения индексирования и ранжирования для Google нет никакой разницы.

Помогает ли проверка кода (например, с помощью валидатора W3C) повысить позиции сайта в Google?

Напрямую – нет. Однако сайт с корректным HTML-кодом лучше отрисовывается в браузерах и более удобен для пользователей с ограниченными возможностями.

Хостинг-провайдер моего сайта использует фреймы и замаскированные переадресации. Повлияет ли это на сканирование, индексирование или ранжирование сайта?

Мы рекомендуем всегда размещать контент на страницах, которые непосредственно используют ваше доменное имя. Как правило, переадресация с фреймами препятствует сканированию, индексированию и ранжированию контента.

Мы внесли изменения в текст на некоторых наших страницах. Почему он не обновляется в результатах поиска?

Сканирование и индексирование страниц сайта может занять некоторое время. Вот как ускорить этот процесс:

Запросите повторное сканирование.
Если у вас есть файл Sitemap, исправьте дату последнего изменения.
Устраните проблемы с дублированием контента, если они есть. Так поисковые роботы будут быстрее обнаруживать обновленные материалы.

На моем сайте есть страницы, созданные с помощью PHP, ASP, CGI, JSP, CFM и т. д. Сможет ли поисковый робот проиндексировать их?

Да. Если для просмотра страницы в браузере не нужны специальные плагины, то Google сможет ее просканировать, проиндексировать и назначить ей позицию. Для нас не имеет значения код страницы, если ничто не мешает ее сканированию.

Мною недавно был приобретен домен, который раньше использовался для распространения спама. Как проверить, не повлияет ли это на мой сайт?

Подтвердите право собственности на свой сайт в Search Console и изучите отчет о мерах, принятых вручную. Если замечаний нет, то всё в порядке.