Общие сведения об индексировании

При индексировании данных в Google учитываются запросы пользователей и то, соответствует ли контент нашим стандартам качества. Скорость индексирования во многом зависит от того, насколько легко обнаружить URL страниц. Если системе они неизвестны, она не сможет сканировать страницы, индексировать их и, как следствие, показывать в результатах поиска. В этой статье рассказано, какие методы можно использовать, чтобы Google было проще найти ваш контент и проиндексировать его.

Возможные методы управления контентом

Для того чтобы мы находили ваш контент, вы можете прилагать минимум или максимум усилий: у каждого подхода есть свои преимущества и недостатки. Из этого раздела вы узнаете, какие действия лучше предпринимать, чтобы ваши страницы занимали более высокие позиции в результатах поиска.

А. Пассивный подход

Даже если у вас нет карты сайта, поисковые роботы Google все равно стараются индексировать его контент полностью (при условии, что доступ к нему не заблокирован). Также они регулярно определяют, сколько страниц ссылается на ваш ресурс. Подробную информацию вы найдете здесь.

Преимущества. Не требуется дополнительных усилий: достаточно просто создавать контент. Этот вариант подойдет, если у вас несложный сайт и вам необязательно, чтобы его контент обновлялся в Поиске как можно скорее. Недостатки. Во многих случаях не все материалы удается проиндексировать, особенно если ресурс создан недавно и на него ссылается мало сайтов. В результате пользователи могут не увидеть в Поиске ваш новый контент (например, если вы добавили разметку для показа расширенных результатов).

Б. Активное управление URL

Если вы предоставите карту сайта (то есть список его URL), мы сможем находить ваши страницы быстрее, так как не будем ограничены только ссылками с других ресурсов в Интернете. Как правило, карту сайта нужно размещать в том каталоге домена, доступ к которому есть у робота Googlebot.

Если несколько URL (например, AMP-страницы, HTML-страницы и мобильного приложения) содержат одинаковый контент, рекомендуется указать, как они взаимосвязаны. Это позволит определять, какую информацию с вашего сайта следует показать пользователю по его запросу (например, ссылку на приложение или AMP-страницу). Для этого выберите, какие страницы будут каноническими, а затем с помощью ссылок установите связи между ними и ресурсами с аналогичным контентом. Так вы позволите Google определять, какую информацию с вашего сайта следует показать пользователю по его запросу. Например, если он выполняет поиск с мобильного устройства, на котором установлено ваше приложение, то увидит ссылку на это приложение.

Преимущества. Вы повысите качество своих расширенных результатов. Кроме того, ваш новый контент и страницы, на которые ссылается мало сайтов, будут добавляться в Google Поиск быстрее. Такой метод позволяет обойти ограничение, которое препятствует быстрой обработке в Google нового контента во всех вариантах его оформления.

Недостатки. Требуется предоставить метаданные ресурсов, то есть добавить карту сайта и установить связи между его страницами, их AMP-версиями и вашим приложением.

В. Отправка новых и обновленных URL в Google

Предыдущий вариант предполагает, что вы размещаете карту сайта на своем ресурсе и ждете, пока Google обнаружит ее. Но вы можете и сами прислать нам список новых URL.

Чтобы мы могли быстро находить новые URL, достаточно создать карту сайта. Если вам нужно, чтобы мы повторно проиндексировали URL, контент которых обновился, предоставьте XML-карту сайта с временными метками.

Получив список URL, мы определим время их следующего сканирования. Сначала будет проверено наличие указанного контента на вашем сервере, и только потом начнется процесс индексирования.

Преимущества. Обновления контента на вашем сайте будут отражены в Поиске в кратчайшие сроки.

Недостатки. Практически отсутствуют. Сложность лишь в том, чтобы создать карту сайта, а отправить ее в Google очень просто. Многие системы управления контентом позволяют автоматически обновлять этот файл.

Подробнее о картах сайтов