Для поддержания высокого качества поисковой выдачи «Яндекс» использует различные фильтры. С их помощью из результатов удаляются или отодвигаются на более низкие позиции ресурсы, которые нарушают правила поисковой системы либо недостаточно удобны, полезны или информативны для пользователей. Аналогичным образом действуют и другие поисковые системы, например Google.
Любой фильтр «Яндекса» — это специализированный алгоритм, при помощи которого поисковая система выделяет сайты, для продвижения которых используются серые или черные методы. Если зафиксировано нарушение, фильтр «Яндекса» удаляет ресурс из выдачи или снижает его позиции. Чтобы определить накрутку, для каждого сайта сложным образом рассчитываются значения характеристик, которые ресурс мог бы получить при естественной поисковой оптимизации. Если текущие характеристики их превышают, фактор накручивается.
Например, доменное имя у сайта зарегистрировано недавно (пара-тройка месяцев), но на него уже ведет порядка тысячи ссылок. С одной стороны, это повод сделать сайт более заметным для пользователей, ведь он, вероятно, чем-то ценен, раз его столько раз упомянули. С другой стороны, это повод попасть под фильтр «Яндекса», ведь при прочих равных обычный ресурс набирает подобную ссылочную массу за пару лет, но никак не за месяцы. Поведение у сайта неестественное, ссылки накручивались, следовательно, поисковая система может приостановить рост позиций, а то и занизить их.
Следующие действия трактуются как накрутка и могут послужить причиной накладывания фильтра:
нетипичные для данной ниши шаблоны поведения посетителей;
совпадающие последовательности действий пользователей;
внезапные колебания сетевого трафика, для которых нет явных причин;
излишнее количество ключевых слов на веб-странице;
большое число (5 и более) внешних ссылок, ведущих на один URL;
слишком активное применение курсива и жирного шрифта;
большое количество купленных (неестественных) гиперссылок.
Узнать, попал ли сайт под фильтр «Яндекса», можно путем анализа динамики позиций в выдаче поисковой системы. Явными признаками служат внезапное снижение при очередном обновлении индекса, нахождение ниже 100-й позиции в течение нескольких месяцев, прямое указание в соответствующем подразделе «Вебмастера» («Безопасность и нарушения» в разделе «Диагностика»). Также можно получить подтверждение непосредственно от поддержки «Яндекса» — в ответном письме специалисты нередко указывают и причину, и страницу с описанием рекомендованных мер по исправлению.
Есть несколько подтипов фильтров. Первые накладываются из-за неестественной ссылочной массы, вторые применяются из-за манипуляций с текстовым содержимым, третьи вводятся за накрутку поведенческих показателей, четвертые — по причине технических ограничений. Рассмотрим более детально отдельные примеры и то, как снять фильтры «Яндекса» в каждом случае.
АГС
АГС — специальный фильтр поиска «Яндекс», который призван не допустить включения в индекс малоинформативных сайтов, не имеющих ценности для пользователей (например, предназначенных исключительно для продажи ссылок). Компания несколько раз модифицировала его, чтобы более точно выявлять некачественные ресурсы. Типичные «жертвы» АГС — сайты-сателлиты, изначально создающиеся в качестве «группы поддержки» для основного продвигаемого ресурса. Как правило, это одна или несколько страниц без полезного контента, но со ссылкой на нужный сайт.
Узнать их можно по следующим признакам:
созданное в автоматическом режиме содержимое;
1.png1.png скопированный с других сайтов текст;
не соответствующие тематике ресурса подразделы (к примеру, про выбор корма для собак на сайте по установке окон);
много исходящих гиперссылок (проанализировать информацию по ссылочной массе можно сервисом Ahrefs);
2.png2.png значительная доля страниц не содержит текста (либо полностью, либо менее 100 знаков без учета навигационных элементов).
Ключевой признак того, что теперь сайт под фильтром «Яндекса» — исключение страниц из индекса и упорное нежелание поисковика индексировать их (или их большую часть). В такой ситуации необходимо с помощью приведенного выше списка проверить, не стал ли ресурс похож на сателлит. Иногда фильтр наказывает и обычные сайты без намеренной накрутки.
Как не попасть под АГС:
оставлять на сайте только те страницы, где имеется достаточное количество нужной пользователям информации, а текст легко читается и соответствует нормам русского языка;
создавать для каждой новой страницы уникальный контент, а не копировать его из других источников или со своего же ресурса;
следить за исходящими ссылками (учитывая и размещенные пользователями в комментариях) — если их станет слишком много, то сайт может попасть под АГС или под специализированный фильтр против «линкопомоек».
Как выходить из-под АГС-фильтра:
«Ты последний»
Под названием «Ты последний» скрывается фильтр, который специализируется на страницах с бесполезным, неинформативным и неуникальным содержимым. Действует он в точности с названием, перенося URL на последнюю строчку в результатах поиска.
Для выявления фильтра нужно выполнить поиск по точному запросу со страницы дважды: с настройкой «Показать все без исключения» и в обычном режиме. Если «Ты последний» действует, то в первом случае сайт обнаружится на последней странице, а во втором — будет отсутствовать в результатах.
Если фильтр есть, действовать нужно следующим образом:
«Ты спамный»
При низкокачественном содержимом сайт может попасть под фильтр «Ты спамный». Его действие проявляется в сильном падении страницы по конкретному поисковому запросу. Низкокачественными поисковые фильтры «Яндекса» считают следующие тексты:
длинные (4000+ слов) и с высокой плотностью ключей (доля более 10 % от общего объема текста, так как это уже не релевантность, а переспам);
переполненные курсивом, подчеркиванием или жирным шрифтом для выделения ключей;
явно нарушающие языковые нормы, с вхождением неестественных словосочетаний и т. д.
Человек такую рекламу читает с трудом, потому что контент предназначается поисковым роботам.
Сайт под фильтром «Ты спамный» SEO-специалисты советуют исправлять следующим образом:
Когда поддержка подтвердит наличие фильтра, нужно внести исправления по замечаниям, а текст переработать, чтобы он стал интересным для посетителя. Одновременно необходимо снизить плотность ключей (конкуренция тут на руку, поскольку можно посмотреть другие сайты в топе и взять средний уровень по ним) и постараться распределить их более равномерно по тексту. Также следует убрать излишние выделения шрифтом. Как правило, после устранения всех недочетов и полной переиндексации сайт возвращается в выдачу.
Борьба за качественный контент в интернете постоянно усиливается. В 2017 году у «Яндекса» появился «Баден-Баден» — специальная разработка против излишней оптимизации текстового содержимого сайтов. Как и другие алгоритмы, он призван снизить вероятность манипуляций выдачей со стороны недобросовестных оптимизаторов.
Фильтр за спам ссылками
«Яндекс» неоднократно пытался сделать покупку ссылок невыгодной — так появились фильтры «Ссылочный взрыв» и «Непот». Поскольку проблема оставалась актуальной, в 2014 году в экспериментальном порядке для всего Московского региона даже попробовали полностью отказаться от учета ссылочной массы (по коммерческим запросам). Но и эту попытку нельзя было назвать успешной. Специалисты поисковой системы не сдавались и в 2015 представили очередной фильтр, который в дальнейшем развился в алгоритм «Минусинск».
Этот алгоритм сохранил работу накрученной ссылочной массы, но стал располагать использующие ее сайты ниже 20-й позиции по всем запросам. При этом пороговое значение закупленных ссылок, после которого срабатывает фильтр, рассчитывается для каждого сайта индивидуально.
Как узнать, что сайт под фильтром «Яндекса»:
трафик падает именно из данного поисковика, в то время как посещаемость из других меняется незначительно;
8.png8.png запросы массово (не считая витальных) выходят за пределы топ-20;
в обновленном интерфейсе «Вебмастер» показывает в подразделе «Безопасность и нарушения» специальное сообщение.
Этот фильтр — один из самых неприятных, поскольку снять его непросто. В первую очередь потому, что ни метод выявления покупных ссылок, ни способ расчета максимального допустимого порога неизвестны. Ведь все намеки на то, какие критерии фильтра использует «Яндекс», относятся к коммерческой информации и потому тщательно оберегаются. Соответственно, нет и рекомендаций, какие из ссылок необходимо убрать.
Другая сложность в том, что убирать постоянные ссылки сложнее, да и их снятие — финансовая потеря для владельца сайта. Наконец, даже после очистки линков эффекта придется ждать 4 месяца и более, поскольку снятие фильтра происходит только после повторной индексации всех прежних доноров.
Схема выхода из-под «Минусинска» такова:
«Яндекс» уверяет, что алгоритм способен отличить купленные владельцами ссылки от тех, которые поставили конкуренты, и, соответственно, его нельзя использовать для нечестной SEO-борьбы.
Санкции за накрутку поведенческих факторов
Отдельный фильтр отслеживает поведенческую накрутку, то есть манипулирование поведением пользователей с целью изменить место сайта в списке результатов поиска. Дело в том, что «Яндекс» при расчете позиций опирается также на поведенческие факторы: показатель отказов (доля пользователей, покинувших ресурс сразу после перехода на него из выдачи), глубину просмотра и т. д. Если пользователи задерживаются, открывают дополнительные страницы и взаимодействуют с содержимым, поисковая система посчитает сайт полезным и даст ему приоритет в выдаче.
При белом SEO такой результат достигается оптимизацией сайта и постоянными улучшениями. Но недобросовестные владельцы не хотят ждать и прикладывать усилия, а потому пытаются симулировать поведение посетителей. Например, при помощи запрограммированных ботов или же нанятых людей, которые выполняют ряд действий, обычно укладывающихся в какой-то сценарий (за X минут просмотреть N страниц).
Фильтр проявляется одновременным снижением позиций для почти всего сайта. Чтобы убедиться, что причина именно в манипулировании поведенческими факторами, необходимо обратиться в службу поддержки «Яндекса». Если наличие санкций подтверждено, нужно отказаться от накрутки и сосредоточиться на естественных методах. Дополнительно ускорить снятие штрафа невозможно, остается лишь ждать обновления индекса. Чем лучше ресурс покажет себя в это время, тем больше шансов на восстановление позиций.
Фильтр начал активно применяться в середине 2011-го и серьезно повлиял на сайты, которые использовали поведенческую раскрутку. Не в последнюю очередь потому, что на выход из-под него пострадавшим требовалось порядка 4–7 месяцев. Поэтому рекомендуется улучшать поведенческие характеристики и привлекать большее число пользователей при помощи интересного контента, повышения удобства для пользователей и иных медленных, но безопасных способов белого SEO.
Действия при наличии фильтра за накрутку поведенческих факторов можно обозначить такой схемой:
Чтобы защититься от фильтра, нужно соблюдать следующие правила:
отказаться от поведенческой накрутки и услуг тех специалистов, которые практикуют черные методы продвижения;
в случае накрутки со стороны конкурирующих сайтов сразу же оповестить об этом службу поддержки «Яндекса».
Для быстрого выявления накрутки и устранения ее негативного влияния в обязательном порядке нужно отслеживать показатели при помощи «Яндекс.Метрики» или иной системы аналитики. Если статистические показатели внезапно начали вести себя странно (к примеру, появился скачок числа отказов или он стал слишком низким), нужно обратиться к специалистам «Яндекса» и предупредить их, что возможны недобросовестные действия третьих лиц в отношении сайта.
Что нужно отслеживать:
CTR для поискового трафика (показывается в «Вебмастере»);
характеристики посещаемости — объем трафика, просмотр страниц пользователем, долю новых посетителей и т. д.;
время на сайте и показатель отказов;
переходы из различных источников помимо поисковой выдачи — из закладок, ссылок в письмах, соцсетей и т. д.;
данные пользователей — геолокацию, время визита, характеристики ПО (браузер, ОС), в том числе и поведение на странице (показывается в «Вебвизоре»);
дополнительный параметр «роботности», который входит в данные «Метрики» по каналам, плюс динамику выявленных роботов в соответствующем отчете в подразделе «Мониторинг» («Отфильтрованы по статистическим правилам»).
Аффилиат-фильтр
Аффилиатами называют ресурсы в одной тематической нише, принадлежащие одному владельцу. Их создают ради вытеснения конкурентов из топ-10. Фильтр по аффилиатам — специализированный штраф, который значительно понижает положение всей выявленной аффилированной группы ресурсов, оставляя из них только самый релевантный. В большинстве случаев санкции срабатывают автоматически, но иногда их накладывают вручную, например если пожаловались конкуренты.
Признаки, по которым «Яндекс» определяет связанные сайты:
пересечение любых контактов на ресурсах (включая телефоны, адреса электронной почты, названия фирм);
похожесть лого, домена и названия фирм;
похожий дизайн, однотипная структура сайтов;
неуникальное или минимально отличающееся содержимое сайтов;
совпадение товаров/услуг, прайс-листов;
размещение на одном хостинге;
скомбинированные с разных ресурсов контакты;
перевод вызова с разных сайтов в одну и ту же компанию (проверяется вручную).
Также «Яндекс» обращает внимание на отслеживание сайтов через единый аккаунт «Метрики», использование общего рекламного кабинета «Директа» или привязку к одному аккаунту в «Вебмастере».
Реже поисковик может причислить к аффилиатам сайты с некорректно настроенной переадресацией или даже ресурсы разных тематик, но обслуживаемые одной фирмой (и имеющие, соответственно, совпадающие контактные данные).
В случае попадания под фильтр аффилированных сайтов вернуться на верхние строки выдачи непросто — могут уйти месяцы на переписку со специалистами «Яндекса». Чтобы не пострадать от санкций, нужно:
запретить индексацию аффилиатов или прописать их как зеркала основного сайта;
модифицировать аффилиаты, чтобы они отвечали за разные ниши и соответствовали различным запросам.
Выбирать альтернативу следует с учетом общей ситуации, в том числе отталкиваясь от имеющихся на сайте ограничений, приоритетов владельца и возможностей специалиста или компании, продвигающей ресурс.
При выборе специалиста или компании по SEO-продвижению необходимо ясно представлять себе риски и возможные последствия тех или иных действий. Напомним, что перечисленными фильтрами перечень алгоритмов «Яндекса» не исчерпывается.
Бан сайта
Бан — самый серьезный штраф, который предполагает полный отказ поисковика от индексирования ресурса. Столкнуться с ним можно в том случае, если сайт массово нарушает правила поисковой системы. Бан назначается соответственно числу нарушений и может действовать 4 месяца или дольше. Скорость устранения недочетов также влияет на срок нахождения под баном.
В случае если «Яндекс» наложил бан на ресурс, последний не будет представлен в выдаче ни одной страницей. При попытке добавить адрес через «Вебмастер» появится сообщение о запрете индексирования.
До снятия запрета продвигать сайт бессмысленно — «Яндекс» все равно его не проиндексирует, равно как и не будет отображать пользователям. Необходимо направить все силы на отмену запрета.
Чтобы убрать бан, потребуется выполнить значительный объем работ и тщательно устранить все недостатки в соответствии со следующей схемой:
Обратиться к специалистам поддержки можно через «Вебмастер». Для этого выполните вход в него, используя аккаунт, к которому привязан сайт. Далее перейдите на страницу «Обратная связь» и оформите обращение.
На снятие бана могут уйти месяцы, плюс после долгожданной индексации сайт зачастую медленно растет по позициям — сказывается испорченная репутация. Нередко выгоднее не дожидаться этого, а запустить новый сайт и продвигать его, не совершая тех же ошибок.