История создания фильтров (алгоритмов) Яндекса

Разместил: Юрий | 07.12.2015
19 комментариев

Всем привет, дорогие друзья — сегодня мы пообщаемся на тему истории — я не очень люблю историю. Никогда не любил её в школе. Однако историю создания фильтров Яндекса — надо знать каждому блоггеру или мало мальскому seo специалисту — вы согласны?

Натолкнул меня на мысль создания этой статьи одна из моих подписчиц, на блоге которой я разгадывал кроссворд. И был там замечательный вопрос на тему одного из фильтров Яндекса. И тут мне в голову пришла мысль: «Блин, а действительно — тема интересная — это надо знать и интересно многим».

Кто со мной согласен?

Кстати, как провели выходные? У меня такое чувство, что их и не было вовсе. Заснул только под утро, нормально проснулся к обеду. Блин, а так хотел пораньше делами заниматься чтобы повысить продуктивность самого себя. А вот иногда так бывает, что и не получается, хотя стремиться к этой цели не перестаю.

Кстати, еще раз напоминаю о замечательном конкурсе на лучшую группу вконтакте — он проходит вот здесь.

А также уже начинаю ожидать первых статей для этого конкурса. Понимаю, что тема не простая — но призы стоят того, чтобы попытаться, тем более что конкурентов пока нет. :).

Реалити-шоу по продвижению крупного проекта

Как профессионал шаг за шагом продвигает самый разные страницы и запросы в ТОП. За год посещаемость выросла с 1000 человек до 7000 человек в сутки.
Это возможно.

Ну а сейчас давайте все-таки перейдём к нашей основной теме — история фильтров Яндекса.

История алгоритмов Яндекса

К сожалению, разделы получились короткие, даже картинок не добавить — уж простите меня. Зато есть длинный список — оглавление, по которому можно перейти к нужном пункту и вернуться обратно.

Так вот.

2005 год – «Непот»-Фильтр

Один из знаменитых фильтров, с него, наверное когда-то началось моё знакомство с SEO.

Этот фильтр накладывался на злостных ссылкопомойщиков. Все ссылки переставали передавать вес, переставали работать.

2 июля 2007 года – Новое ранжирование — новая формула.

Этот алгоритм сделал поисковик Яндекс более универсальным.

С этого момента появилось разделение поисковой выдачи на однословные и многословные запросы. т.е. по однословникам и многословникам применялись разные форумы, которые могли привести к разной выдаче.

7 августа 2007 года – «Родео»

Появляется новая формула расчета для однословников. Приоритет получают главные страницы.

17 января 2008 – «Восьмерка» SP 1

Изменение отношения Яндекса к внешним ссылкам. Значение ссылки с главных страниц — снижается.

Вебмастера, как следствие, начинают больше уделять внимания ссылкам с внутренних страниц.

5 февраля 2008 – «Гости из прошлого», или второе название «Непот в тумане»

Отмена, а точнее замена непот-фильтра.

Если под непот-фильтром значение ссылок было нулевым, то сейчас значение всё-таки какое-то появилось.

Ссылки стали иметь какое-то значение, но он было близким к нулю. После этого стало невозможно определять находится ли сайт под фильтром «непот» или нет.

Название этого фильтра, кстати — народное. Взято с форума searchengines.

18 марта 2008 года – атака на SEO ссылки

Ссылки с морды продолжают терять свой вес. В это время была сильная просадка сайтов в топе. Очень многие топовые сайты, которые держались там только за счет ссылок с главных страниц доноров — потеряли свои позиции.

Хотя ссылки с внутренних страниц всё еще продолжают работать.

4 апреля 2008 года – Языковой барьер

Яндекс начинает адаптироваться под зарубежный трафик.

В поисковой выдаче Яндекса начинают появляться иноязычные сайты.

16 мая 2008 года — Магадан

Это первый алгоритм, который получил четкое имя. С этого началась игра Яндекса в города.

Сам же алгоритм влияет на выдачу по информационным запросам, научившись при этом читать аббревиатуры и транслит.

Кстати, этот алгоритм был первым, который до официального релиза тестировался вебмастерами около месяца.

2 июля 2008 – Магадан 2.0

Слегка доработанный алгоритм, в котором более высокое значение придавалось уникальности текстов. Ну, мы-то уже знаем как проверять уникальность.

Читайте также:  Запрещенные методы раскрутки

А также было занижено значение возраста сайта и слегка изменен алгоритм ранжирования коммерческих запросов.

28 августа 2008 – Изменения расчета ТИЦ

Ни для кого не секрет, что со времени появления ТИЦ — вебмастера пытаются его накручивать. Я знаю, даже конкурсы устраиваются, кто быстрее накрутит.

Изменения в алгоритме конечно коснулись всех накрутчиков. В тот момент около 15% всех сайтов потеряли свой тиц до 0 или до минимальной десяточки.

Представьте себе разочарование вебмастеров. :)

11 сентября 2008 – Находка

Вес и значение внутренних страниц увеличилось. В поисковой выдаче по СЧ и даже по некоторым ВЧ вместе с главными начинают появляться внутренние странички.

Начинают вводиться изменения в поисковой выдаче по одному и тому же запросу, только с морфологическими изменениями. Т.е. если указано множественное число, например.

Информационные сайты начинают показываться вместе с коммерческими. Яркий пример — Википедия.

8 апреля 2009 – Арзамас (Анадырь)

Вводится региональная выдача, которую получили Москва, Питер, Биларусь, Украина и Казахстан. И только через три месяца в Вебмастере стало возможно привязывать свой сайт к определенному региону.

Для правильного ранжирования неоднозначных запросов начали учитывать историю уточняющих запросов.

А также по некоторым запросам появились картинки в основной поисковой выдаче.

30 апреля 2009 – Война с агрессивными вебмастерами

Начали искуственно занижаться сайты, на которых агрессивно используются попандер-банеры.

Я бы их вообще забанил, если честно, так уже достали…

24 июня 2009 – Арзамас 1.1.

Для регионов России (не Москва и не Питер) — была улучшена формула ранжирования.

Значение возраста домена было обратно увеличено.

В поисковой выдаче начали появляться страницы с длиннющими портянками текста и незначительным количеством входящих ссылок. Отсюда пошёл вывод что Яндекс любит длинные тексты.

11 августа 2009 – продолжаем бороться с агрессивной рекламой.

Понижаются сайты, которые используют систему clickunder

Война эта была начата 30ого апреля.

20 августа 2009 – Арзамас 1.2.

Продолжается улучшение алгоритма геозависимости. Создан классификатор геозависимости запросов.

Появилось разделены на гео- зависимые и независимые запросы.

В топе по геонезависимым запросам показываются только трастовые сайты в основном главные страницы.

28 сентября 2009 – фильтр АГС 17

Только в этот момент было официально упомянут этот фильтр, хотя Яндекс утверждает что он работает аж с 2006ого года.

К сожалению, доступы в архив Яндекса у меня пока не было.

Главным симптомом этого фильтра является низкое количество страниц в поисковой выдаче.

17 ноября 2009 – Снежинск.

Это первый алгоритм, которые был запущен на платформе MatrixNET — до сих пор на слуху.

В региональную выдачу добавлены еще 19 городов.

Для ранжирования страниц в поисковой выдаче стали учитываться НЕСКОЛЬКО ТЫСЯЧ параметров.

Появились поведенческие факторы.

Изменился алгоритм коммерческих запросов. Релевантность отдельно взятой страницы сайта стало иметь меньшее значение чем качество всего сайта в целом.

Яндекс научился анализировать анкоры и выделять коммерческую тематику.

18 декабря 2009 – АГС 30

Стандартный АГС расширился — добавились новые факторы, которые позволяли Яндексу исключить сайт из общей выдачи.

Под АГС начали попадать не просто ГС, но и разные ПсевдоСДЛ. У которых контент уникален, но сам сайт не интересен. Напомню, что раньше под АГС попадали сайты исключительно за не уникальность контента.

Кстати, этот фильтр мог накладываться обоими способами, как руками, так и роботом.

22 декабря 2009 – Конаково

Опять изменения коснулись региональной выдачи. Теперь локализацию получили дополнительно еще 1250 городов России.

20 января 2010 – фильтр Яндекса на портянки

Да, и на ваши портянки текста у яндекс есть свои санкции. Но здесь скорее речь не о самой портянке,а о переспаме ключевыми фразами в этих портянках.

Фильтр накладывался на конкретную страницу с портянкой. И лечился банальным уменьшением текста. При этом плотность ключей могла оставаться такой же.

Читайте также:  Список Актуальных фильтров поисковых систем!

17 марта 2010 – Снежинск 1.1

Ранжирование геонезависимых запросов теперь происходит по новой формуле.

В этой нише приоритет получают энциклопедии, различные обзоры и т.п. , в общем не комерческие сайты и страницы.

13 сентября 2010 – Обнинск

Яндекс научился лучше определять регион сайта.

По геонезависимым запросам преимущество получили те сайты, которые не привязаны к региону.

Любопытный фильтр на коммерческие ссылки: акцептор (ваш сайт) начинает получить ссылочный вес только через 3-4 месяца после покупки ссылки.

Своеобразный временной фильтр. Проверка на прочность кошелька владельца сайта.

2 ноября 2010 – улучшение ранжирования авторских текстов

Новый алгоритм определения авторства текста.

15 декабря 2010 – Краснодар.

В выдаче начинает появляться «СПЕКТР». Технология, позволяющая учитывать не явные цели пользователя.

В результате по общему ВЧ запросу в ТОП-10 выдачи можно было встретить одновременно интернет-магазин, форум и энциклопедию, чтобы явно удовлетворить желание пользователя.

Было произведено разделение сайтов на 60 различных категорий по смыслу. Сайты сначала показывались по принципу квоты. т.е. сначала показывались все подряд, а потом по приоритету поведенческих факторов.

17 декабря 2010 – новая формула ранжирования по ГЗ запросам

С геонезависимым разобрались. Сейчас начинают появляться алгоритмы геозависимых запросов.

Как следствие — стало проблематично продвигать один сайт в нескольких регионах.

Май 2011 – первая волна за накрутку ПФ

23 мая на блоге Яндекс появилось официальное предупреждение о РУЧНОЙ пессимизации сайтов, который были заподозрены в накрутке поведенческих факторов.

В результате были понижени в выдаче многие именитые SEO компании и их клиенты!

17 августа 2011 – Рейкьявик

Этот алгоритм стал первым шагом к персонализации выдачи на уровне конкретного человека. А именно — результаты строились на основе языковых предпочтений каждого пользователя.

13 сентября 2011 – «Ты Спамный»

Это последователь фильтра «За портянки». Яндекс раздаёт пилюлей за переспам ключевых слов в текстах.

Этот фильтр — первый, который учитывал поведенческие факторы. И понижал он в выдаче только те переспамленные тексты, которые имели низкие поведенческие показатели.

Изначально фильтр накладывался на отдельные страницы.

5 октября 2011 – Яндекс учитывать Usability

Наконец-то начинает учитываться юзабильность сайта.

С этим алгоритмом в поисковой выдаче начинают понижаться сайты с плохой навигацией или с переизбытком рекламы.

23 ноября 2011 – Коммерческая тематика получила новый алгоритм

Новая формула вводилась для коммерческих сайтов. Для их ранжирования теперь учитываются такие параметры как:
— удобство сайта
— ассортимент
— цены
и прочие…

Конечно, сначала для тестов этот алгоритм был запущен только для Москвы, а потом уже и для других регионов.

12 декабря 2012 – Калининград.

Попытка подстроить Топ-10 и поисковые подсказки под каждого пользователя, основываясь на истории его запросов и поведения на странице выдачи.

Согласно исследованию платформы «Калининград», объемы трафика у старых трастовых сайтов выросли.

А вот продвигать молодые ресурсы в персональном поиске привычными методами стало сложнее.

7 февраля 2012 – Персонализация подсказок для зарегистрированных

Если вы были зарегистрированы и авторизованы в Яндексе — Яндекс начинает учитывать вашу историю запросов при формировании подсказок для вашей поисковой выдачи.

Еще один шажок к персонализации.

16 февраля 2012 – региональная выдача для Я.Картинок

Пока свою выдачу имеет каждая страна, но это только начало.

15 мая 2012 – пессимизация сайтов с обманными попапами

Еще один алгоритм , который пессимезирует сайты со всплывающими окнами. Чего Яндекс их жалеет — не пойму :)

Сейчас даже сайты, у которых всплывали сообщения, который заточены под системные уведомления или даже сообщения соц сетей — понижались в выдаче.

16 мая 2013 – «Острова»

Яндекс анонсировал новую платформу «Острова».

Изначально предполагалось что пользователь сможет решить любой свой вопрос прямо на странице поиска. Что-то купить, заказать, или забронировать. Прямо на Яндексе, не заходя на сайт.

В планах было выкатить сервис быстро, однако по никому неизвестным причинам — была выкачена только бета версия и то с опозданием.

Читайте также:  Правильный анализ сайта или блога

6 ноября 2013 – АГС 40

Опять наш любимый АГС обновился. Увеличился набор показателей, которые влияют на ранжирование сайта.

С этого момента фильтр стал полностью автоматическим. Накладывался он за отсутствие ценности сайта. В основном фильтр затронул MFA-сайты и другие сайты, созданные исключительно для монетизации трафика через рекламу и партнерские программы.

5 декабря 2013 – Бессылочное ранжирование

Нашумевшее отключение ссылок.

Руководитель веб-поиска Александр Садовский сообщил что готовит новую формулу ранжирования, в которой отсутствуют факторы, относящиеся к ссылкам.

Сначала алгоритм обещали тестировать только по Москве и только для коммерческих запросов. Запустить его планировали в начале 2014.

14 марта 2014 – отмена ссылочного ранжирования. Первый этап

Не смотря на запуск бессылочного ранжирование — анонсирована новая формула ссылочного ранжирования для коммерческих запросов (Москва) в некоторых тематиках.

А именно:
— Недвижимость
— Туризм
— Электроника
— Бытовая техника.

20 марта 2014 – понижение сайтов с агрессивной рекламой

На этот раз под меч Яндекса попали сайты, которые размещали тизеры и другую рекламу, отвлекающую пользователя.

В основном под эту раздачу попали сайты с тизерами эротического содержания, пугающими кадрами, и другой не приятной рекламой.

15 апреля 2014 — Обновление АГС

Если ваш сайт словил АГС — количество его страниц не уменьшается. Единственный признак фильтра — обнуление ТИЦ.

Лето 2014 – июньский релиз Яндекса

Изменение формулы текстового ранжирования по коммерческим запросам. Расширение списка тематик с отключенным ссылочным. Изменение классификатора поисковых запросов.

14 cентября 2014 – Ранжирование информационных сайтов

Новый алгоритм стал более жестоким.

Очередное понижение в выдаче сайтов, не имеющих добавочной ценности.

19 cентября 2014 – Опять наказывают агрессивную рекламу

Еще сильнее закрутили гайки сайтам, которые монетизировались отвлекающей рекламой.

К сожалению, алгоритм получился с косячком — были пессимизированы много много белых сайтов, где нормальные рекламные блоки подменялись на агрессивные. Это происходило с помощью браузерных вирусов.

Конечно, косяк был устранен, но со временем.

1 декабря 2014 – Первая волна пессимизации за накрутку ПФ

Писсемизированы тысячи сайтов.

Первыми под раздачу попали сайты, которые усиливали поведенческие через «накликивание» покупных ссылок. Это делалось для того чтобы ссылки передавали больше веса.

30 декабря 2014 – Вторая волна пессимизации за накрутку ПФ

Под эту волну попали уже все. И те кто накручивал. И даже те, кому накручивали без их ведома.

15 апреля 2015 – Новый «Минусинск»

На минской конференции Садовский анонсировал выход нового фильтра – «Минусинска», который направлен на борьбу с ссылочным спамом.

После анонса 9000 сайтов получили официальное предупреждение и совет отказаться от ссылочного продвижения..

15 мая 2015 – Первая волна пессимизации за SEO-ссылки

За первый проход было понижено 488 сайтов.

27 мая 2015 – Вторая волна

Вторая волна унесла с собой около 200 сайтов. Унесенный сайта по своим показателям не отличаются от пострадавших в первой волне.

23 июня 2015 – Третья волна

Еще один Минусинск в действии. К сожалению, конкретных данных найти не смог.

8 сентября 2015 – Еще раз обновлен и дополнен фильтр АГС

Опять-таки основная цель — понизить сайты, которые злоупотребляют seo ссылками.

Обнуляется ТИЦ, чтобы выйти из-под фильтра — нужно просто перестать продвигаться ссылками.

Вот и всЁ!

Надеюсь, данная информация была для вас полезна. Очень на это надеюсь. Если вам не хватило этой информации — рекомендую также статью про фильтры поисковых систем — эта статья прекрасно её дополняет.

[urlspan]Подписывайтесь[/urlspan] на мой блог, ну и давайте посмотрим замечательный видос на тему эволюции алгоритмов Яндекса. Жаль только до 2010 года, но тоже интересно.

[bye]

19 комментариев

  1. Игорь

    Борьба миров )) Яндекс проитв сео-оптимизаторов. Инициатива на стороне Яндекса и правила игры диктуют они. Оптимизаторы ищут лазейки. Кошки-мышки. ))

    Ответить
    1. Сергей Оксак

      Ага! Только не борьба миров, а единство и борьба противоположностей — как учили когда-то в институте :). Вечная борьба, в которой никогда не будет победителя…

      Ответить
  2. Вадим

    Очень интересная и познавательная статья, спасибо!
    О большинстве фильтров я даже не слышал и, надеюсь, не услышу)))
    Я считаю, что, если сайт контентный, то никакая сео-оптимизация не нужна (я имею в виду покупку ссылок, комментариев, накрутки ПФ и пр.). Если же сайт не контентный, то только ЯДирект, АдВорд и реклама в соц. сетях.

    Ответить
    1. Сергей Оксак

      Полностью согласен с тобой! Надеюсь, что тоже не услышу обо всем этом :) Одно только перечисление уже наводит ужас и тоску :) А статья полезная и очень информативная, честно говоря нигде раньше этой информации не встречал! Так что Денису — респект и уважуха!!!

      Ответить
  3. Юлия

    Интересная статья, только мне не все понятно. Например, что такое «портянки» (п.1.21) Расскажите чуточку подробнее, пожалуйста!
    Да, Новогоднее оформление сразу создает атмосферу праздника… Красиво!

    Ответить
    1. Денис Тумилович

      Портянка — статья с оочень и оочень длинным текстом.

      Ответить
      1. Сергей Post author

        ))зачем так, зато очень информативная, вот почитал и «много» узнал о сео и могущему Яндексе

        Ответить
  4. Виктор

    Ужасно интересная статья. Ее должен прочитать каждый !!! Я пока не дочитал, но обязательно дочитаю. Спасибо, Денис. Нигде такого не видел (может быть не обращал внимания)

    Ответить
  5. Сергей Оксак

    В очередной раз убеждаюсь, что нет предела совершенству! Неужели они все работают! Вывод из всего этого простой: бесполезные все варианты продвижения сайтов, кроме как полезный для пользователя контент! Если не попал сейчас, попадешь чуть позже…

    Ответить
  6. Олег

    Я вот так и не понял, почему некоторые фильтры получили названия городов? И еще, «Острова» вроде бы вообще «сняли с производства»… Или бета-версия так и осталась и думают развивать эту платформу?

    Ответить
    1. Сергей Оксак

      Видимо, кто-то в Яндексе очень любит детскую игру в города :) :) :) А насчет «Островов» скорее всего, также как и везде — ушел главный человек-разработчик, заглохла и идея..

      Ответить
      1. Олег

        Не помню, где читал, а, возможно, это вообще троллинг был. В общем, человек возмущался, что он с Минусинска и говорил, что у них там вообще ничего страшного нет и какого фига фильтр так назвали)))

        Ответить
  7. Сергей Оксак

    Денис, а вот все-таки вопрос на засыпку: есть ли точный способ узнать сайт находится под фильтром или нет? К чему задаю вопрос: проверка через xtool и pr-cy показывает, что все хорошо, санкций Яндекса нет, а между тем ТИЦ 10 единиц сняли.. Я конечно на это уже не обращаю внимание, но все-таки хотелось бы знать… Может еще что-новое придумали?

    Ответить
    1. Денис Тумилович

      Точного способа нет.
      Но обычно эти сервисы показывают реальную картину по санкциям.
      А тиц сняли потому что перестала какая-то ссылка тематическая индексироваться и учитываться

      Ответить
      1. Сергей Оксак

        Блин, всего из-за одной или нескольких ссылок? Интересно, а есть способ узнать каких именно или надо все самому заново перелопачивать?

        Ответить
        1. Денис Тумилович

          Вот тут никто не скажет :) Или одну сняли, или несколько. Надо самому в вебмастере пересматривать.

          Ответить
          1. Сергей Оксак

            Да уж, работка намечается большая… Хочу все-таки один раз для себя разобраться, в чем могут быть причины и как их быстро устранять. И вообще, понять надо ли это делать или все-таки писать другие статьи и не мучиться сомнениями :)

          2. Надежда

            Скорее всего что несколько, а вообще ТиЦ — это показатель цитирования, значит не было прироста ссылокв последнее время. В общем успокаиваться нельзя при любом ТиЦ.

  8. Надежда

    Информация в статье обалденная, честное слово, всем рекомендую почитать, интересно же. Советуют не продвигать свой сайт ссылками, во дают, а чем продвигать тогда?

    Ответить

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *