Как мы боролись со спамом в Google Поиске в 2021 году

Четверг, 21 апреля 2022 г.

Робот Googlebot и его друг Паучок знакомятся с отчетом о веб-спаме за 2021 год на ноутбуке

В 2021 году пользователи со всего мира искали в Google, как прийти в себя после потрясений. Мы не только помогали людям находить полезную информацию по самым разным запросам, но и принимали меры для того, чтобы в Поиске не было спама и вредоносного контента.

SpamBrain: наше наиболее эффективное решение в борьбе со спамом

В 2021 году мы обнаружили в 200 раз больше сайтов со спамом, чем в начале нашей работы в этом направлении почти двадцать лет назад. Во многом это произошло благодаря SpamBrain – системе борьбы со спамом, работающей на основе искусственного интеллекта.

Рисунок, на котором изображены система SpamBrain и робот Googlebot

Мы запустили систему SpamBrain в 2018 году и с тех пор постоянно повышали ее эффективность. В 2021 году система SpamBrain обнаружила почти в шесть раз больше сайтов со спамом, чем годом ранее. В результате объем спама со взломанных ресурсов (наиболее распространенного типа спама в 2020 году) снизился на 70 %, а объем спама с бессмысленным текстом на хостинг-платформах – на 75 %. Ещё одна важная особенность системы SpamBrain заключается в ее постоянно растущей способности обнаруживать различные типы угроз.

В текущих условиях, когда ежедневно создается все больше сложного спама, умение системы SpamBrain выявлять деструктивный контент и признаки вредоносных действий на миллиардах веб-страниц позволило нам обезопасить пользователей от спама при выполнении поиска по 99 % запросов.

Обеспечение качества поиска и безопасности пользователей

В 2021 году нам удалось добиться больших успехов в нескольких областях, выходящих за рамки защиты от обычного веб-спама, в частности в борьбе с мошенничеством, ссылочным спамом и домогательствами в интернете.

Обнаруживать контент и ранжировать результаты нам по-прежнему помогают ссылки, и в 2021 году мы стали обеспечивать защиту этого важного сигнала ещё лучше. В частности, мы запустили обновленный алгоритм борьбы со ссылочным спамом, который призван выявлять искусственные ссылки и не позволять им влиять на качество поиска.

Мошенники представляют значительную угрозу для безопасности пользователей интернета. В рамках работы, начатой нами в 2020 году, мы запустили несколько обновлений наших алгоритмов, которые позволили сократить объем спама в результатах поиска на 40 %. Повысив охват своих алгоритмов, мы сумели обезопасить пользователей от самых разных форм мошенничества, которые выходят за рамки компетенции службы поддержки и которым мы противодействуем вот уже несколько лет.

Для защиты пользователей мы расширили возможности системы SpamBrain, и теперь она способна выявлять признаки домогательств в интернете, а в случае с запросами, содержащими имена, – снижать позицию сайтов, где пользователям предъявляется требование платы за удаление данных.

Противодействие фальсификации рейтинга

Мы не ограничиваемся борьбой со спамом и стремимся уменьшить объем некачественного контента, а также противодействуем фальсификации рейтинга. Для этого мы стремимся не допускать действий, которые балансируют на грани нарушения наших рекомендаций по обеспечению качества, но по сути призваны фальсифицировать рейтинг и причиняют неудобства пользователям.

Примером подобных действий служат попытки повысить рейтинг отзывов о товарах, включающих не собственные впечатления авторов, а измененные описания товаров. В 2021 году мы внесли два значительных изменения в принципы оценки отзывов о товарах. Это привело к значительному сокращению числа некачественных отзывов и позволило интересным и полезным материалам занимать более высокие позиции.

Мы хотим, чтобы пользователям ничего не мешало находить максимально подходящий контент в Google Поиске. Если вы столкнетесь с недопустимыми действиями на странице результатов поиска, вы можете сообщить нам об этом прямо на ней.