История алгоритмов пессимизации поисковой системы Яндекс

Пессимизация веб-сайтов происходит вследствие использования запрещённых приёмов продвижения. При обнаружении таковых, поисковые системы, в частности Яндекс, накладывают на ресурс санкции, которые могут осуществляться вручную или автоматически. Для этого поисковик задействует специальные алгоритмы (фильтры). Автоматическая пессимизация происходит путём мониторинга и обработки сведений о веб-сайте, собранными роботами поисковиками, ручная – модераторами поисковой системы.

Основные факторы пессимизации сайтов

Наложение фильтров и падение позиций веб-сайта в поисковой выдаче Яндекса возникает по ряду причин. Перечислю наиболее часто встречающиеся нарушения, приводящие к пессимизации:

1. Некачественный контент – переизбыток ключевых слов, дубли текстов на нескольких страницах ресурса, автогенерируемые не релевантные тексты.
2. «Чёрное» SEO – ключевики, оформляемые невидимым шрифтом, дорвеи (промежуточные страницы), клоакинг и прочее.
3. Переизбыток внешних ссылок, ведущих с веб-сайта. В поисковой выдаче они могут отмечаться как «Спам», а при большом объёме подобных ссылок ресурс нередко попадает под санкции.
4. Ссылочный спам – при высокой численности и резком приросте ссылок, ведущих на сайт с ресурсов плохого качества, происходит бан.
5. Накрутка поведенческих факторов (ПФ), использование агрессивной и навязчивой рекламы, препятствующей восприятию изложенной информации, например, баннеры popunder, clickunder.
6. «Ложные обменники» — ресурсы, призывающие пользователей скачать файлы с просьбой отправки платного sms. Более того, под санкции попадает не только сам веб-сайт, но и сайты с ссылками, ведущими на эти ресурсы.

Перечень алгоритмов пессимизации Яндекса

За время своего существования, Яндекс ввёл множество алгоритмов и фильтров, позволяющих отслеживать некачественные сайты с целью их понижения в результатах поисковой выдачи. Как такового официального списка на сайте поисковика не существует, но всё же восстановить хронологию новшеств и изменений в работе поисковой системы можно.

Для начала я приведу сводную таблицу за последние 10 лет, а после подробнее остановлюсь на каждом нововведении отдельно.

«Удар» по SEO ссылкам: 18.03.2008 г.

С этого дня ссылки, размещаемые на главных веб-страницах сайта, теряют в весе. В результате ресурсы, занимающие топовые позиции за счёт таких ссылок, массово понижаются на местах в поисковой выдаче. Пока ссылки с внутренних страниц выполняют свою работу.

Старт борьбы с агрессивной рекламой: 30.04.2009 г.

Замечено искусственное падение в поисковой выдаче веб-страниц, на которых размещаются баннеры popunder. Яндекс рекомендует не использовать назойливую рекламу, отвлекающую пользователей.

Снижение позиций веб-сайтов с рекламой clickunder: 11.08.2009 г.

Яндекс продолжает вести борьбу с избыточной рекламой. На этот раз в поисковой выдаче падают ресурсы с рекламой clickunder, перенаправляющую пользователей на другие сайты.

Первый официальный анонс алгоритма АГС-17: 28.09.2009 г.

Яндекс заявляет, что данный алгоритм введён в работу ещё в 2006 году. Однако первое упоминание о нём появляется только спустя несколько лет. Он был предназначен для фильтрации сайтов в результатах поисковой выдачи. Выглядело это следующим образом: поисковой робот проводил мониторинг содержимого веб-страниц всего ресурса и принимал решение об их включении в индекс.

Если в поисковой выдаче участвовали только несколько страниц веб-сайта, то все другие страницы отмечались, как не представляющие ценности для интернет-пользователей. В результате число проиндексированных страниц варьировалось в диапазоне 1-10, иногда больше. Численность страниц с индексацией зависела от определённых факторов, например, качество текстов, уровень интересов пользователей к ресурсу и так далее. Сначала фильтр затронул веб-сайты с неуникальными текстами и автоматически наполняемые ресурсы.

Внедрение алгоритма АГС-30: 18.12.2009 г.

По словам Яндекса, этот алгоритм стал модернизированной версией АГС-17. В обновлённом алгоритме были существенно расширены факторы (их стало более 100), определяющие исключение сайта (отдельных страниц) из индексации. Фильтр мог накладываться вручную и автоматически, а санкции стали применяться и в отношении уникального контента с технической точки зрения, но не имеющего ценности для интернет-пользователей.

Введение санкций за «портянки» (переспам): 20.01.2010 г.

Яндекс начал вводить санкции за длинные тексты, которые переспамлены ключевыми словами – так называемые «портянки». Фильтр использовался в отношении отдельных страниц веб-ресурса. Для снятия санкций нужно было уменьшить объём текста в разы, но плотность ключевых слов могла оставаться с тем же показателем.

Пессимизация за накрутку поведенческих факторов (1 этап): 23.05.2011 г.

В блоге Яндекса для вебмастеров было размещено напоминание о том, что влияние на поисковую систему при помощи «эмуляции действий» интернет пользователей будет пресекаться. В отношении сайтов, игнорирующих данное предупреждение, принимаются меры, которые будут вести к снижению позиций в результатах поисковой выдачи. По итогу некоторые ресурсы были действительно понижены в поиске.

Появление фильтра «Ты спамный»: 13.09.2011 г.

Введение ограничительных мер за переспамленные тексты. Свои позиции потеряли страницы, на которых был размещён спамный текст с низкими поведенческими факторами. Вначале алгоритм был запросозависимым и распространялся на отдельные веб-страницы.

Пессимизация ресурсов с pop-up окнами: 15.05.2012 г.

Под санкции попали веб-сайты, использующие pop-up (всплывающие окна), настроенные для показа системных уведомлений или смс из соцмедиа. Довольно много ресурсов автоматически упали в рейтинге поисковой выдачи.

Новый алгоритм АГС-40: 06.11.2013 г.

Обновлённый алгоритм, ограничивающий показ сайтов низкого качества в результатах поисковой выдачи, а именно ресурсов, которые в основном заточены под продажу ссылок. Алгоритм в автоматическом режиме и на регулярной основе производил анализ веб-сайтов. Санкции снимались в том случае, когда при очередной проверке выявлялось, что ресурс улучшил свои показатели и стал полезным для интернет-пользователей.

Нововведения в алгоритме АГС: 15.04.2014 г.

В связи с внедрёнными преобразованиями в ранжировании коммерческих запросов, которые приводили к уменьшению спроса на SEO ссылки, Яндекс принял решение модифицировать алгоритм АГС. Если до этого времени страницы сайтов, продающих ссылки, исключались из поисковой выдачи, то теперь санкции ужесточились путём аннулирования их ТИЦ (тематического индекса цитирования). Новшества коснулись не только обнаруженных сайтов после официального анонса изменений в алгоритме – под санкции попали ресурсы, ранее выявленные алгоритмом АГС.

Пессимизация сайтов за навязчивую рекламу (новый этап): 22.09.2014 г.

В блоге Яндекса появилось очередное напоминание о том, что назойливая реклама на веб-сайте (popunder, clickunder, редиректы родительского окна) воспринимается поисковиком отрицательно. Также разработчик упомянул о введении способов распознавания обманных уведомлений и излишней рекламы. Акцент был поставлен на том, что существующие алгоритмы претерпели преобразований и ещё более эффективно выполняют функцию выявления подобной рекламы.

Новый всплеск пессимизации за накрутку поведенческих факторов: 01.12.2014 г.

Массовая пессимизация ресурсов за накрутку переходов из поисковой выдачи. Более того, под санкции попали веб-сайты, которые задействовали накликивание покупных ссылок для повышения передачи ссылочного веса.

Алгоритм «Минусинск»: 15.04.2015 г.

Цель создания этого алгоритма – эффективная борьба со ссылочным спамом. Введены ограничения для ресурсов, использующих SEO ссылки для своего продвижения – их позиции в результатах выдачи стали снижаться. Яндекс советовал владельцам сайтов отказаться от SEO ссылок и работать над повышением качества своего ресурса (анализировать интересы пользователей, улучшать контент и навигацию сайта).

Со слов представителей Яндекса, 9 тысяч веб-сайтов получили письма с настоятельной рекомендацией отказаться от покупок SEO ссылок. В итоге первая волна действия «Минусинска» коснулась 488 сайтов (средняя потеря позиций в результатах поиска составила 20 пунктов). Вторая и третья волна работы алгоритма уже не сопровождалась рассылкой уведомлений от поисковика.

Очередное обновление алгоритма АГС: 08.09.2015 г.

В Блоге Яндекса для вебмастеров было размещено очередное уведомление о негативном отношении поисковой системы к купле/продаже SEO ссылок. На этот раз санкции были выдвинуты к ресурсам, которые злоупотребляли таковыми, но теперь качество веб-сайта не спасало от понижения позиций в результатах выдачи. Как и ранее, за нарушения аннулировался ТИЦ. Яндекс напомнил, что ограничительные меры снимаются при отказе от использования таких ссылок на ресурсе после выявления изменений поисковым роботом.

«Опасные сайты»: 02.10.2015 г.

До этого времени, ресурсы, представляющие угрозу для интернет-пользователей, не понижались в результатах поисковой выдачи, а просто отмечались соответствующей пометкой. После череды экспериментов, поисковиком было принято решение о пессимизации опасных сайтов во избежание излишних затрат времени пользователями на поиск нужной информации. По мнению Яндекса, правильнее разместить на место опасного сайта иной полезный ресурс.

Санкции за кликджекинг: 30.12.2015 г.

Очередные меры борьбы с приёмами для обмана пользователей, а именно с механизмом кликджекинг – формирование на веб-сайтах невидимых элементов на видео, кнопках, формах и так далее, взаимодействие пользователя с которыми происходит без его желания. Яндекс сообщил, что позиции ресурсов, использующих подобные методы, могут снижаться в поисковой выдаче.

Алгоритм «Баден-Баден»: 23.03.2017 г.

Алгоритм, способный определять переоптимизированные веб-страницы, которые впоследствии начали терять позиции в поисковой выдаче. Со временем при обнаружении переоптимизированных текстов на некоторых страницах даже возникала вероятность понижения рейтинга всего ресурса. В результате владельцам сайтов пришлось отказаться от текстов с большим числом ключевых слов, которые сложно воспринимаются пользователями.

Пессимизация за навязчивые оповещения: 10.01.2019 г.

Яндекс вводит санкции против ресурсов, вынуждающих пользователей делать подписку на рекламные оповещения, например, когда происходит блокировка сайта до того момента, пока пользователь не даст согласие на уведомления. Такие сайты не только занимают более низкие позиции, но и имеют отметку с предупреждением об опасности. Как всегда, для снятия ограничений, нужно отказаться от подобного метода работы сайта и исправить ситуацию в Яндекс.Вебмастере.