Поисковый спам и борьба с ним в 2018 году

Четверг, 21 марта 2019 г.

Отчет роботов Googlebot о борьбе со спамом в 2018 году

Мы стремимся предоставлять результаты максимально возможного качества по любому поисковому запросу. Например, чтобы предотвратить негативное влияние так называемого веб-спама на результаты поиска, мы принимаем меры в отношении материалов и методов, нарушающих рекомендации Google для веб-мастеров. Благодаря нашим усилиям доля страниц с таким контентом среди тех, на которые пользователи переходили из результатов поиска, составляет существенно меньше 1 %. Ниже подробно рассказывается, что мы для этого сделали в 2018 году.

Особенное беспокойство по-прежнему вызывает спам трех типов:

Спам на взломанных сайтах. В 2017 г. мы отмечали, что в результатах поиска стало гораздо меньше спама с сайтов, пострадавших от деятельности хакеров. В 2018 г. эта тенденция сохранилась, так как взломанные веб-страницы выявлялись быстрее и злоумышленники не успевали с их помощью повлиять на результаты поиска или причинить кому-либо вред. Тем не менее сайты с такой проблемой представляют серьезную угрозу безопасности в интернете. Мы не в силах предотвратить взлом, но всегда стремимся помочь веб-мастерам справиться с последствиями.

Спам, созданный пользователями. Этому типу спама мы давно уделяем пристальное внимание. Он может распространяться с помощью специально созданных записей на форумах или аккаунтов на бесплатных платформах. Такой контент не предназначен для восприятия человеком, не имеет никакой ценности для просматривающих страницы пользователей и только мешает общению. В 2018 г. нам удалось более чем на 80 % сократить объем такого спама в результатах поиска. Мы не можем предотвратить неправомерную деятельность на сайтах, но стараемся предоставить владельцам сайтов доступную информацию о способах защиты общедоступных разделов сайта от подобных действий и о том, как эти способы применять.

Ссылочный спам. Как и прежде, мы считаем надежные и релевантные ссылки важным критерием ранжирования в Поиске. Мы по-прежнему оперативно принимаем меры в отношении явного ссылочного спама и сумели частично нейтрализовать некоторые методы, используемые злоумышленниками для влияния на рейтинг сайтов. А главное, в сотрудничестве с веб-мастерами и специалистами по поисковой оптимизации мы продолжили развенчивать многочисленные мифы о размещении ссылок, возникавшие на протяжении многих лет. Мы напоминали владельцам сайтов, что им не о чем беспокоиться, если они не собираются использовать ссылки в первую очередь для повышения рейтинга и сосредоточены на создании хорошего контента. Как нам кажется, побуждать владельцев сайтов создавать качественный контент – один из лучших способов борьбы с любым спамом. В наших справочных ресурсах, таких как Введение в поисковую оптимизацию, вы найдете не только полезные советы, но и опровержения распространенных ошибочных представлений о том, при каких условиях страницы будут хорошо выглядеть в результатах поиска Google. Если вы хотите поддержать нас в борьбе с нарушениями, отправляйте жалобы на ссылочный спам.

Работа на общее благо с пользователями, веб-мастерами и разработчиками

Каждый день пользователи сообщают нам о спаме в результатах поиска, фишинге и вредоносном ПО. Так они помогают выявлять в Поиске эти и другие проблемы, которые не были обнаружены автоматически. Мы получили более 180 000 жалоб на спам и после их рассмотрения приняли меры в 64 % случаев. Мы очень благодарны всем, кто их отправлял. Это большой вклад в наше дело.

Мы считаем, что важно информировать владельцев сайтов о возникших у них проблемах. В 2018 г. системы Google создали более 186 миллионов сообщений как с рекомендациями, так и с уведомлениями о неполадках, в том числе способных негативно повлиять на отображение страниц в Google Поиске. Эти сообщения могут получить только те, кто подтвердил право собственности на сайт в сервисе Search Console. Мы успешно доставили 96 миллионов таких уведомлений, а остальные будут по-прежнему доступны, пока не утратят своей актуальности. Веб-мастера смогут увидеть их, зарегистрировавшись в Search Console. Большинство отправленных нами сообщений – приветствия для новых пользователей сервиса, а на втором месте – новость о том, что стало доступно индексирование с приоритетом мобильного контента. Чуть больше 2 % всех сообщений – примерно 4 миллиона – касались мер, принятых вручную в ответ на нарушения наших рекомендаций для веб-мастеров.

Спам не находит места в результатах поиска, если там появляется качественный контент. Поэтому мы продолжили совершенствовать инструменты и отчеты в помощь веб-мастерам, которые создают такой контент. Сервис Google Search Console был полностью переделан, в нем появились новые и улучшенные отчеты (об эффективности, индексировании, ссылках, удобстве для мобильных), а также абсолютно новые функции (инструмент проверки URL, управление сайтами и доступом). В 2018 году завершилось бета-тестирование этой версии Search Console, и теперь она доступна всем зарегистрированным владельцам сайтов.

Не остались без внимания и разработчики пользовательских интерфейсов, которым мы обязаны современным видом веб-ресурсов. Независимо от того, используют эти разработчики систему управления контентом, применяют собственный код CSS и JavaScript или опираются на веб-фреймворки, мы постарались помочь им сделать сайты удобными для пользователей и достаточно оптимизированными для поисковых систем. Новая функция в Lighthouse, расширении с открытым исходным кодом для автоматического анализа качества веб-страниц, позволяет проверять их состояние с точки зрения поисковой оптимизации и быстро определять, что можно улучшить.

Мы также работаем непосредственно с веб-мастерами по всему миру. Наши сотрудники регулярно встречаются с ними как онлайн, так и лично. Мы провели свыше 190 консультаций и прямых трансляций в более чем 70 городах для 170 000 человек, в числе которых были специалисты по поисковой оптимизации и по интернет-маркетингу, а также разработчики. Мы организовали четыре мероприятия по веб-поиску в Токио, Сингапуре, Цюрихе и Осаке, а также конференцию, которая охватила 11 индийских городов. В 2018 году мы стали устраивать видеовстречи на испанском языке в дополнение к английскому, немецкому, французскому, хинди и японскому. В рамках этих встреч на нашем канале YouTube для веб-мастеров желающие могут найти полезную информацию, получить советы и поучаствовать в плодотворных обсуждениях. Эксперты по продуктам в прошедшем году по-прежнему помогали веб-мастерам в официальных справочных сообществах на более чем 10 языках.

Мы с новыми силами будем бороться с веб-спамом и в 2019 году.

Рисунок, на котором персонажи приветствуют друг друга