Итоги

Таким образом, в данной статье мы рассмотрели 4 основных текстовых фильтра Яндекса, появившихся до 2015 года. Несмотря на внешнюю схожесть, каждый из них имеет свои характерные признаки и отличия, а снятие каждой санкции требует особого подхода. Надеемся, что предложенный материал поможет верно поставить диагноз и быстро реабилитировать ваш сайт.

Мы выпустили новую книгу «Контент-маркетинг в социальных сетях: Как засесть в голову подписчиков и влюбить их в свой бренд».

Санкции и различные фильтры Яндекс вводит не просто так, а для того, чтобы в результатах поиска были качественные сайты и только качественные. Но! Мир несправедлив и зачастую санкции задевают и нормальные сайты. Также бывает, что из-за субъективной оценки вебмастера не умышленно нарушают правила поисковых систем.

Мы собрали описания всех фильтров и санкций Яндекса для того чтобы рассказать вам, как выйти из-под них и как проверить, что они есть.

Аффилиат фильтр Яндекса и как его снять

Если контактная информация на двух страницах сайт1.ру и сайт2.ру совпадает (частично или полностью), Яндекс считает эти сайты или принадлежащими одной компании. Яндекс по-особому относится к взаимосвязанным страницам, и если сайты определены как аффилированные, то поисковик не покажет их на одной странице в поисковой выдаче по одному и тому же запросу. И если вы будете искать определенную информацию по ключевому слову, то в поисковой выдаче не будет одновременно отображаться сайт1.ру и сайт2.ру, это попросту невозможно.

Это дает понять, что продвижение аффилированных сайтов с помощью пересекающихся списков поисковых запросов не даст никакого результата. Увы и ах, получить дополнительные места в ТОП-10 поисковой выдачи вам не удастся.

Если избежать совпадений в ключевых словах, то еще можно будет занять несколько мест в первой десятке поисковой выдачи по определенному запросу.

Какая именно из двух страниц будет отображаться в результатах поиска?

Первым будет показан более релевантный сайт. Та страница, которую Яндекс посчитает подходящей для пользователя, использовавшего определенный поисковый запрос. Несколько причин, по которым будет показан сайт1.ру вместо сайт2.ру:

• возраст страницы;
• качество и количество ссылок входящих на страницу;
• другие факторы.

Довольно часто фильтр аффилиатов не пропускает страницы крупных компаний, это случается из-за того, что они пытаются создать достаточно большое количество сайтов (для регионов или отдельных городов).

Как не попасть под фильтр?

Чаще всего фильтр применяется автоматически (если у страниц совпадают определенные факторы). Эти санкции снимаются точно так же, как и накладываются - автоматически. Писать в службу поддержки и что-то объяснять просто бесполезно, лучше попытаться устранить причины и ждать снятия санкций.

Зачастую Яндекс считает сайты аффилированными даже из-за совпадения описания определенных товаров или при похожих доменных именах, а иногда даже по URL! Необязательно чтобы совпадала контактная информация. А если совпадают регистрационные данные доменов или хостинга, то это может еще больше усугубить ситуацию.

Фильтр Яндекса “Новый домен”

Почти нереально поднять недавно созданный сайт в ТОП по определенным конкурентным запросам. Данный фильтр многие считают нелогичным и достаточно несправедливым, называя его ужасной недоработкой и технической слабостью Яндекса.

В этом случае стремление поисковых систем к борьбе с дорвеями не привело ни к чему хорошему. Некачественных страниц в поисковой выдаче не стало меньше, фильтр по большей части вредит действительно качественным страницам, которые могут релевантно удовлетворить запросы пользователей.

Новые сайты почти всегда попадают под этот фильтр, что, повторюсь, очень несправедливо. Надеемся, что когда-нибудь разработчики изменят свое видение этого фильтра.

А пока молодые сайты почти не имеют шансов на быстрое продвижение по конкурентным запросам. Лучше всего продвигать молодые проекты постепенно и не гнаться за быстрым продвижением и соответственно быстрой прибылью.

Нужно начать с низкочастотных запросов, затем постепенно перейти к среднечастотным. Тем, кто торопится начать работу с высокочастотными запросами, лучше всего подождать, и вступать в серьезную игру не раньше чем через год (с момента начала продвижения нового проекта). Это позволит автоматически вывести сайт из-под фильтра.

Санкции Яндекса за умышленную накрутку поведенческого фактора

Яндекс уже давно учитывает поведенческие факторы в ранжировании сайтов, это заставляет оптимизаторов проводить различные эксперименты с накруткой данного показателя. Для этого используют специальные системы накликивания, которые имитируют поведение реальных пользователей в органической выдаче Яндекса и на страницах сайта.

Цель Яндекса - убрать с органической выдачи страницы, на которых использованы системы накрутки ПФ.

На самом же деле, единственная цель - наказать сайты, которые этим занимаются.

Что мы видим, когда поисковик применяет такого рода санкции? Позиции по коммерческому запросу резко падают, снижается объем трафика, который поступает из Яндекса.

Нужно просто перестать использовать программы для накручивания ПФ, сделать так, чтобы сайт был интересен людям, а не роботам. И, конечно же, написать об этом в поддержку Яндексу. Вдруг повезет.

Фильтр за взрослый контент

Данный алгоритм работает по очень интересному принципу. Робот определяет запросы, которые могут помочь в поиске страницы. Если страница оптимизирована под "п*рн" запрос (присутствие определенных фраз или контента), то такой сайт не может отображаться в обычной выдаче.

Пользователям будет не очень приятно увидеть такие сайты, если, конечно же, они их не искали. Значит, для решения вопроса достаточно просто пересмотреть контент своей страницы, тогда фильтр автоматически будет снят.

Хочу отметить, что фильтр применяется достаточно странно и неоднозначно: он часто влияет на страницы, которые сами по себе не являются "п*рн" страницами. На них могут быть размещены определенные баннеры, которые ведут на сайты знакомств. Робот принимает это за адалт и понижает позиции страницы.

Фильтр очень плохо отрегулирован, часто он умудряется затронуть сайты, на которых просто написаны определенные стоп-слова.

Единственный выход - полное удаление хоть какого-то намека на "п*рн" контент. Удалять нужно и рекламу, и новости и даже определенные комментарии.

"Непот" фильтр

Как ограничить влияние искусственных ссылок на процесс ранжирования?

В сентябре 2010 года разработчики Яндекса решил внедрить дополнительный комплекс мер (в дополнение к уже существующему фильтру, который понижает позиции страниц, продвигающихся только за счет покупки некачественных ссылок с различных " "), который позволят исключить из ТОПа похожие страницы. Многие продвигались с помощью покупки довольно дешевых ссылок, теперь это будет тяжело осуществить, ведь такие ссылки резко потеряют в эффективности.

Фильтр применяется исключительно для тех страниц, которые продают ссылки, санкции не касаются продвигаемых ресурсов. Достаточно просто отказаться от массовой продажи ссылок с ГС.

Очень важно постепенно менять ссылочную массу. Оптимальным вариантом будет покупка качественных ссылок с проверенных ресурсов, и постепенная замена ими старых, некачественных ссылок.

Фильтр "ты последний"

Такое название он получил от самих оптимизаторов, и досталось оно фильтру из-за его основного симптома. По любым уникальным фразам со страницы и по доменам он всегда занимал последнее место в поисковой выдаче. Сейчас этот фильтр стал более совершенным, его уже нельзя определить по домену в выдаче. Он стал очень похож на довольно известный фильтр в Google - “Supplemental” (которого сейчас в Google нет).

Задача фильтра - избавлять поисковую выдачу от устарелых, нерелевантных и попросту ненужных страниц.

Симптомы, по которым его можно обнаружить, - заметное падение трафика от Яндекса Сайт останется нормально проиндексированным, а страницы также будут отображаться в выдаче.

Достаточно ввести в поисковую строку фразу, которая находится у вас в title, или какой-то кусок текста, являющий уникальным. Если вашего сайта не будет в первой десятке - вы попали под "ты последний".

Вероятные причины попадания вашей страницы под "ты последний"

• наличие неактуального или неуникального контента;
• непостоянное обновление контента;
• использование популярных шаблонов.

Лучшим лекарством считается тотальная переработка страницы, нужно поменять дизайн и содержимое.

Фильтр "Ты Спамный"

Это название было придумано самими оптимизаторами: оно быстро и намертво прицепилось, и теперь этот фильтр известен только как "ты спамный". В чем главная опасность такого фильтра? Если его применить к определенному запросу, при каждой новой выдаче он будет терять все больше позиций и падать все ниже. Не каждый запрос просядет, фильтр коснется только пары «запрос-страница». Довольно часто он затрагивает только СЧ и ВЧ запросы.

Как определить наличие данного фильтра на странице?

Нужно внимательно следить за каждым апдейтом выдачи, который проводит Яндекс. Проверять позиции нужно на регулярной основе. Падения незначительные - ничего страшного, но если ситуация только ухудшается, будьте уверены, действует "ты спамный".

Место продвигаемой страницы заняла другая, которую поисковые роботы Яндекса считают более релевантной. Существует способ проверки: в расширенном поиске нужно указать запрос с данными вашего сайта. Если в результатах ваша страница не будет первой, то "ты спамный" действует во всю мощь.

Можно подставить к определенному запросу стоп-слова. Возьмите продвигаемый запрос и проверьте его в поиске, затем добавьте слеш и повторите проверку. Если фраза без стоп-слова ниже, чем без слеша - фильтр применяется к этой странице. Также актуальной будет проверка с использованием определенных словоформ. Можно вбить запрос, которого нет в тексте и который не является продвигаемым, к примеру "продвижения страниц", если он окажется выше, чем "продвижение страниц", значит фильтр точно применяется по отношению к данному сайту.

Способы борьбы с данным фильтром

Один из самых легких фильтров, выйти из под которого довольно не сложно.

• Изучить и очистить страницу от переизбытка ключевого слова (или слов). Можно просто склонять ключевые запросы, тогда фильтр вам не страшен.
• Сокращение достаточно огромных текстов, уменьшение объема пойдет только на пользу странице. Главное - чтобы текст был продающим.
• Провести коректировку нечитаемых словоформ. Такими словоформами считаются запросы:

1. Мебель купить
2. Женская одежда интернет магазин

• Такие словоформы нужно или просто выкинуть из текста, или првести их в читаемый, человеческий вид.
• Провести кардинальный редизайн страницы.
• Написать "Платону", если ничего не помогло.

Анти-Говно-Сайт АГС 30 и АГС 17

Этот фильтр является единственным в своем роде. Его уникальность в том, что разработчики не только не открещиваются от его создания и существования, но еще и постоянно комментируют все вопросы, которые касаются .

Разработчики заявляют, что фильтр создан для исключения из поисковой выдачи страниц, который утратили свою ценность для пользователей. Но в действительности - фильтр просто ограничивает влияние таких страниц на ранжирование и его результаты.

Симптомы фильтра: индекс может содержать 7-10 страниц сайта. Как проверить, не коснулся ли вашего сайта именно этот фильтр?
Достаточно ввести URL своей страницы . Если в показанных результатах будет меньше 10 страниц, но на самом деле их больше, то скорее всего фильтр АГС действует.
В настоящее время Яндекс обнуляет ТИЦ, но не выкидывает страницы из выдачи.

Факторы, привлекающие внимание данного фильтра:

• Исходящие ссылки в слишком большом количестве.
• Шаблонность страницы (при условии использования бесплатного шаблона).
• Структура страницы. При условии, что почти все страницы находятся на расстоянии одного клика от главной.
• Автоматическая генерация контента. Или неуникальный контент, взятый с других похожих страниц.
• Разделы, которые никак не связаны с тематикой страницы (так называемые "продажные" страницы).
• Дубли страниц с одинаковым содержимым, но с разными адресами.

Разработчики заявляют, что фильтр учитывает гораздо больше показателей и этот список далеко не полный. Но все эти характеристики свидетельствуют о том, что вы владелец "говносайта", который является нерелевантным.

Если фильтр "накрыл" хороший и полезный ресурс, лучше всего обратиться к Платону, использовав панель Вебмастера. Если сайт плохой, лучше забыть о нем, или попытаться сделать все, чтобы фильтр был снят автоматически.

Фильтры Яндекса "Переоптимизация" или "Переспам"

Каждую из санкций накладывают по определенным причинам. Также они имеют свое определение и причины, по которым они могут быть сняты.
Официально фильтр "Переоптимизация" анонсировали в 2011 году, в сентябре. Функционировать он начал гораздо позднее.

"Переспам" никогда не анонсировали официально, но это не помешало появления дискуссии, которая развернулась почти на 160 страниц. Площадкой для споров стал форум SearchEngines, который обрел огромную популярность после ожесточенных дискуссий. Функционировать фильтр начал в 2010 году.

Проявление фильтров

Как можно определить тип фильтра, который был применен к продвигаемому запросу или документу?

• Наверное, это "Переспам"

Случилось резкое проседание одного продвигаемого запроса, он упал на 15-35 мест. Вполне возможно, что произошло изменение релевантной страницы, но в индексе все еще находится старая версия страницы.

Позицию сайта можно улучшить, если немного модифицировать продвигаемый запрос. Базовою версию [продвижение страниц самостоятельно] на [продвижение страницы самостоятельно] или на [страниц продвижение самостоятельно].

Это позволит оставить документ на приемлемой позиции по определенным запросам, которые будут вести на него. Выдача Яндекса продолжает давать ему относительно нормальный трафик, но произошло существенно ухудшение позиции основного запроса (она снизилась на текстовый АП).

• Наверное, это "Переоптимизация"

Позиции продвигаемой страницы почти не меняются, несмотря на модификацию запроса (если поменять окончание), который будет вести к одному и тому же документу.
Случилось резкое проседание всей группы запросов, которые продвигали на один документ. Результатом падения стала потеря примерно 20 пунктов. Могло произойти изменение наиболее релевантной в выдаче страницы, по определенным запросам, но сам сайт по-прежнему в индексе.
Документ потерял определенный объем входящего трафика. Произошло проседание в конец первой страницы Топ-10.

Основные различия

Переоптимизация - санкция, которая накладывается на весь документ, ее нельзя считать запросозависимой. Штраф можно считать довольно несущественным. Определенные запросы могут остаться на первой странице поисковой выдачи.

Переспам - фильтр, который накладывается на определенную продвигаемую фразу. Данный фильтр является документозависимым и запросозависимым. Санкция будет незамедлительно снята, если немного модифицировать запрос. Штраф может оказаться существенным, возможна потеря 35 позиций.

Фильтр "Переспам" в основном накладывается всего на несколько запросов, достаточно просто изменить запрос, это повлечет за собой и соответствующее изменение позиций в выдаче.

Раньше фильтр снимали при помощи таких изменений: [поисковые запросы/] или [поисковые запросы ~~ чтопопало12367ghd], это помогало значительно улучшить позицию документа. Но сейчас это невозможно технически.

"Переоптимизация" будет снята, если использовать расширенный поиск. Нужно провести сравнение по релевантности между вашим сайтом, и страницей, находящейся немного выше в выдаче. В этом вам может помочь документированный язык поискового запроса Яндекс. Если ваша страница ниже страницы конкурента по продвигаемым запросам, то стоит применить расширенный поиск, если ваш проект окажется более релевантным - это может означать, что вы имеете дело с переоптимиацией.

Для диагностики наличия пост-фильтров в Яндексе используется методика сравнения релевантности продвигаемого сайта по поисковому запросу с конкурентами в выдаче. А именно:

• Определяется текущая позиция сайта по запросу в указанном регионе.
• Берётся 3 конкурента, которые находятся выше продвигаемого сайта по запросу.
• С помощью операторов расширенно поиска происходит сравнение релевантности продвигаемого сайта с конкурентами в выдаче.
• На основании сравнения выносится вердикт: находится продвигаемый документ под санкциями или нет.

Подробней о методике проверки и самих текстовых фильтрах можно прочитать в обзорной статье по текстовым фильтрам на сайте компании «Пиксель Плюс». В дальнейшем, планируется внедрение ещё двух других инструментов для диагностики санкций данного типа.

После внесения изменений в документ фильтр всё равно диагностируется. Почему?

Как следует из описания методики, приведенного выше, диагностика строится на базе анализа выдачи Яндекса по нужному поисковому запросу в заданном регионе. Таким образом, если вы внесли какие-либо изменения в документ, то санкции отделом антиспама Яндекса могут быть сняты только после:

• Переиндексации документа.
• Пересчёта факторов антиспама (часто, в день текстового апдейта).
• Обновления выдачи поисковой системы.

Поддержка Яндекса отрицает наличие санкций, почему?

Дело в том, что служба поддержки поисковой системы уполномочена подтверждать лишь наличие хостовых санкций (применяемых для домена целиком). В новой версии панели вебмастера Яндекса, наличие санкций данного типа (хостовых) выводится во вкладке «Диагностика» → «Нарушения».

Прочие же типы санкций, такие как:

• Переоптимизация (для документа).
• Переспам (для запроса).
• Аффилирование (для группы сайтов).
• И ряд других.

Служба поддержки Яндекса не подтверждает, что не делает их наличие менее значимым для SEO-специалиста.

Какие ещё фильтры можно диагностировать инструментом?

Аналогичной методикой (с помощью инструмента) можно диагностировать:

1. Наличие фильтра Переспам (по одному запросу для заданного документа).
2. Включение проекта в процесс рандомизации выдачи (алгоритм Многорукого бандита / Multi-Armed Bandits).
3. Прочие пост-фильтры, которые применяются к сайту или документу.

В каких случаях проверка не производится?

Проверка на наличие фильтра на документе не производится, если указанный сайт занимает в выдаче позицию выше 6 (с 1 по 5 место) и ниже 100 (с 101 и далее).

В случае нахождения запроса в ТОП-5 будет выведено сообщение об отсутствии фильтра, а в случае отсутствия документа в ТОП-100 оповещение о невозможности произвести проверку.

Проверка дала разный результат в течение дня, почему?

К сожалению, Яндекс периодически отдает разные результаты ответа на один и тот же запрос пользователя (с тем же регионом). Это может быть связано как с проведением тестирования, так и прочими факторами (между двумя проверками мог произойти апдейт, измениться пороги применения пост-фильтров и так далее, правда, это значительно менее вероятные события).

Для правильной диагностики мы настоятельно рекомендуем опираться на результаты анализа по нескольким поисковым запросам для одного документа. Это сводит вероятность ошибки к минимуму.

На документе обнаружено наличие текстового пост-фильтра, что делать?

Наличие текстового пост-фильтра на паре запрос-документ (Переспам) или целиком на документе (Переоптимизация / Новый фильтр) негативно сказывается на позициях сайта. Требуется приложить усилия для снятия фильтра. Для этого, рекомендуется скорректировать в сторону понижения ряд факторов документа, которые анализируются антиспам-отделом Яндекса.

В первую очередь, следует обратить внимание на такие факторы как:

• Длина текста.
• Число вхождений частотных слов в текст документа (не обязательно слов из продвигаемых запросов).
• Число вхождений частотных слов в исходный код документа (в том числе атрибуты alt и title тега img, meta-теги, title).
• Число и расположение заголовков и тегов акцентов: h1-h6, b, strong, em, i.
• Вхождения частотных биграмм и триграмм.
• Орфографические и пунктуационные ошибки.
• Разбивка текста на фрагменты.

В экспертном инструменте «Расширенная проверка на переоптимизацию » — формируются рекомендации по необходимым изменениям документа в процентном, численном и общем виде. В бесплатном инструменте «Проверка на переоптимизацию » — рекомендации недоступны.

Подробней с методикой, вы можете ознакомиться в презентации ниже.

Задайте вопрос или оставьте комментарий

Яндекс постоянно стремится улучшить качество поисковой выдачи и беспрерывно работает над разработкой новых алгоритмов определения качественного контента. Недавно появились сообщения о том, что появился новый текстовый фильтр, у которого пока даже нет названия. То есть оно, наверно, есть, просто вебмастерам оно неизвестно.

Судя по всему «Новый» фильтр (будем называть его так) появился летом 2014 года, алгоритм его действий точно не известен. Некоторые СЕО- специалисты, например, Дмитрий Севальнев обратили внимание на то, что неожиданно некоторые страницы продвигаемых или находящихся под их наблюдением сайтов стали резко терять свои позиции вплоть до вылета из ТОП1000. Но чаще всего страница находится в пределах 100 – 400 позиций, хотя 100-ая или 1000-ая позиция – это уже неважно: на страницу никто никогда не перейдет.

Графически это выглядит так:

(Для увеличения любой картинки — кликните по ней)

По определенному запросу текст ранее находился на втором месте в выдаче, потом страница попала под фильтр и вылетела из ТОП100. В результате некоторых предпринятых мер кратковременно восстановила позиции, после чего опять попала под фильтр. Потом опять поднялась – и все это в результате действий вебмастера. По остальным контрольным запросам позиции сайта не изменились.

Но до чего жалко потерять вторую позицию в выдаче!

Самое обидное, что Яндекс, по своему обыкновению, молчит, предоставляя право вебмастерам только догадываться. Они и пытаются догадаться: некоторые причины наложения фильтра будут ясны, после того как вы причитаете о порядке выхода из-под фильтра. Об этом чуть ниже.

Как узнать наложен ли «Новый» фильтр на страницы вашего сайта?

Дмитрий Севальнев разработал специальный онлайн сервис, который в настоящее время пока бесплатный, но сколько он еще будет бесплатным – зависит он нас с вами, ниже я на этом подробно остановлюсь.

Указываете нужный регион. URL своего сайта и нужные запросы – по одному в каждой строке. Нажимаете «Отправить» и через очень короткое время появляется таблица с результатами:

Видим, что сначала сервис идет на ваш сайт и подбирает наиболее релевантный URL и потом сравнивает его с конкурентными страницами. У меня по первому запросу сервис ничего не нашел (хотя соответствующая статья имеется), по второму запросу наложен фильтр, а по третьему – нет, не наложен.

Разберем второй запрос. Видим, что сервис определил 101 позицию в выдаче, а если фильтр был бы снят, то позиция, вероятно, стала бы 75-й. Результаты проверки можно проверить, нажав соответствующую ссылку. Только учтите, что именно в вашей выдаче Яндекс будет подмешивать результаты ваших предпочтений в соответствии с алгоритмами . Поэтому ваша выдача будет немного отличаться от данных сервиса.

Без всякого сомнения. Особенно радует, что сервис бесплатный. Но поскольку работа сервиса требует достаточно большого количества XML- лимитов, то большая просьба ко всем вебмастерам: если вы сами не пользуетесь XML- лимитами, то отдайте их в этот сервис. Как это сделать, подробно написано выше таблицы – под кнопкой «Описание». Это, по моему опыту, займет не более 2 минут, зато теперь, когда вы начнете работать с сервисом, то, может, будут использованы и мои XML- лимиты:)), а потом — и ваши.

Теперь несколько слов о том, как снять наложенный фильтр.

Понятно, что все данные получены исключительно экспериментальным путем и изложены разработчиком сервиса в его докладе «Санкции поисковых систем – новый виток борьбы» на конференции «IBS Russia 2014» (ноябрь 2014г.). Прочитать его доклад полностью можно , тем, кому этого не хочется, вот слайд с его презентации :

Естественно, что при написании новых статей все эти рекомендации следует использовать в полном обьеме.