Привет! Я запускаю обучающие онлайн курсы по SEO. Подробности и форма записи на Alaev.school
Zapostim
 

Аффилированность сайтов в Яндексе: принцип работы и признаки, определение сайтов-аффилиатов, как выйти из-под фильтра

Аффилированность сайтов в Яндексе Привет, друзья! Я вам обещал, что не заброшу публикации про SEO на моем блоге, который именно за это вы и полюбили.

Сегодня очередная публикация от моего коллеги – Алексея: аффилиат-фильтр в поисковых системах. Казалось бы, тема старая, ей много лет. И зачем об этом писать еще раз? Во-первых, в поисковиках все меняется постоянно, не только фильтры и санкции, но и методы их определения. В подтверждение тому – пока писалась данная публикация, один из методов определения фильтра перестал работать. Поэтому актуальность в таких вопросах – это главное.

Наш пост – самая актуальная инструкция на день публикации (на дворе 2018 год). Ну, и, во-вторых, я постараюсь поддерживать ее в актуальном состоянии, когда вдруг что-то поменяется.

Передаю слово Алексею.


Так называемый в среде сеошников аффилиат-фильтр — это попытка поисковых систем противостоять монополизации выдачи, то есть не допустить ситуаций, когда по каким-либо запросам в результатах выдачи одновременно присутствуют несколько сайтов, принадлежащих одной компании. Такие сайты называются аффилиатами (от англ. affiliate, филиал).

В своем разделе помощи Яндекс пишет:

«Мы стараемся не индексировать или не ранжировать высоко группы сайтов одного владельца/компании, предоставляющие пользователю одни и те же товары или услуги, созданные с целью заполнения нескольких позиций в результатах поиска и сбора трафика».

И согласитесь: было бы совсем не здорово, если бы мы искали какой-нибудь товар, но на первой странице выдачи были бы площадки одной компании с одними товарами, условиями покупки, обслуживанием и т.д.

Стоит отметить, что Google более спокойно относится к аффилиатам, в основном обращая внимание на уникальность информации. Если с этим — порядок, то серьезных проблем, обычно, не возникает. Поэтому информация в статье по большей части направлена на отношение Яндекса к этому вопросу.

Принцип работы фильтра в Яндексе

Суть работы аффилиат-фильтра аналогична группировке выдачи. Например, когда вы вводите запрос, то видите в выдаче, как правило, только один документ с одного сайта, а не десять. Даже если у вас на сайте есть 10 документов, релевантных запросу, то в поиске по этому запросу будет виден только один — самый релевантный (индивидуальные ситуации, когда по запросу присутствует больше 1 результата для 1 сайта не учитываем).

При аффилировании принцип тот же, с одной только разницей – документы группируются не в рамках одного сайта, а по всей группе аффилированных ресурсов.

Или проще говоря, если взять 10 аффилированных ресурсов и ввести в поиск запрос, которому они все будут релевантны, то в выдаче по этому запросу будет находиться только 1 самый релевантный документ с этих десяти ресурсов.

Полезные факты, которые важно знать о работе фильтра

  • Яндекс не признает наличие у себя подобного фильтра;
  • Определение аффилиатов может проходить как автоматическим способом на уровне алгоритмов поисковой системы, так и вручную, с помощью асессоров. Если фильтр наложен алгоритмическим способом, то и избавиться от него можно только если алгоритмы перестанут фиксировать проблему, т.е. внеся необходимые изменения на сайт и подождав какое-то время;
  • Наложение фильтра не зависит от апдейтов выдачи;
  • С аффилиатами работает не только Поиск, но также Директ и Маркет (ниже будет небольшая информация на этот счет).

Какие ресурсы могут быть признаны аффилиатами

Причины, по которым можно подпасть под фильтр:

  • На сайте есть пересечения контактной информации (телефон, e-mail, реквизиты, контакты в мессенджерах, контакты в соц.сетях и т.д.);
  • В справочнике Яндекса есть пересечение контактной информации между карточками организаций (при этом контактная информация может быть не указана на сайте);
  • Один адрес и похожие названия фирмы;
  • Одинаковые данные whois у доменов;
  • Ресурсы находятся на одном IP-адресе или хостинге;
  • Ресурсы продвигаются в одном регионе и в одной тематике;
  • Низкая уникальность контента и html-кода сайтов относительно друг друга (описание товаров, услуг, категорий, информация о компании, фото товаров, калькуляторы, плагины и т.д.);
  • Добавление сайтов в один и тот же аккаунт Я.Метрики или Я.Вебмастер;
  • Одинаковые счетчики (Метрика, liveinternet), коды Adsense и т.д.;
  • Схожий дизайн, структура сайта, одинаковые CMS;
  • Похожий ассортимент товаров или услуг, цены, скидки, условия обслуживания, доставки и т.д.;
  • Похожая структура ссылочного профиля;
  • Перекрестные ссылки между сайтами;
  • Часто попадают под такой фильтр площадки, где размещены партнерские внешние ссылки. При переходе по такой ссылке или покупке, совершаемой посетителем, партнер получает определенную прибыль от продажи товара или услуги.

Какие-то причины являются более весомыми, например, одинаковые контакты, а какие-то являются только косвенными факторами, например одинаковые цены или CMS сайта. Обычно под аффилированность можно попасть только при совокупности нескольких факторов.

Признаки аффилированности

При появлении на сайте указанного фильтра он начинает выпадать сразу по многим запросам, при этом страницы продолжают находиться в индексе поисковика. Чаще всего пропадает видимость по всем запросам со страницы, но не всегда — иногда страница продолжает быть в топе по некоторым запросам, но по смежным не находится. Если аффилированные документы примерно одинаковой релевантности, то поисковая система может ранжировать их по очереди, и в этом случае они начинают «мигать» то есть — то появляться, то снова пропадать. Пример того, как это может выглядеть, на скриншотах ниже.

Мигание позиций, Topvisor

Пример позиций того же сайта, только в сравнении с конкурентом-аффилиатом, на скриншоте отчетливо видна смена релевантного документа: страница первого сайта стала ранжироваться в поиске, а страница второго исчезла из выдачи, при этом сами страницы продолжают находиться в индексе поисковика.

Мигание позиций сайта конкурента, Topvisor

Как найти сайт-аффилиат, если он заранее неизвестен

  1. Введите в поиск название компании на латинице и на русском, номера телефонов, адрес почт, логины в месседжерах и все прочие контакты, кроме адреса, которые размещены у вас на сайте. Проанализируйте результаты выдачи: очень часто поиски заканчиваются уже на этом этапе.
    • Для большей надежности можно повторить поиск в Яндекс.Справочнике. На практике был опыт, когда по номеру телефона аффилиат не находился в поиске, но находился в справочнике
  2. Проверьте тексты на уникальность. Как правило среди аффилиатов большая часть имеет неуникальный контент, поэтому этот способ тоже часто выручает. Могу посоветовать этот сервис https://advego.com/plagiatus/ список сайтов с дублирующим контентом расположен на вкладке “Отчет”
    Проверка текста на уникальность

Как проверить ресурсы на аффилированность

Первый более-менее точный способ

Итак, если у вас появилось подозрение на присутствие фильтра, то необходимо:

  1. Выгрузить весь список или хотя бы 20-30 запросов, по которым ресурс перестал находиться в поиске или по которым позиции начали выпадать из поиска и через некоторое время возвращаться обратно.
  2. Собрать список всех конкурентов по этим запросам в топ-10 или топ-30 выдачи. В этом плане очень сильно выручает сервис http://coolakov.ru/tools/most_promoted/
  3. А дальше нужно проверить позиции по этим запросам вашей площадки и площадкам конкурентов. Для большей надежности можно добавить в список запросы, по которым сайт продолжает находиться в топе (если таковые имеются, конечно же).  Сравните позиции — нужно искать конкурента, у которого позиции максимально противоположны вашему ресурсу, т.е. если по какому-то запросу ваш сайт присутствует в выдаче, то аффилиата там не будет и наоборот.
  4. Для большей уверенности стоит провести несколько повторных проверок. Если повезет и позиции по запросам начнут мигать, то это даст более четкое понимание, с каким ресурсом есть проблемы.

Данный способ позволяет почти со 100% вероятностью найти аффилированные ресурсы, даже если заранее они неизвестны.

Способ проверки на аффилиат-фильтр №2

Суть аналогичен нижеописанным (уже нерабочим) способам: надо сформировать запрос к выдаче, релевантный обоим сайтам. Для этого указываем тайтл страниц в кавычках.

ВАЖНО! Если в тайтле присутствует домен сайта — отсекайте его, иначе получится пустой результат, типа этого:

Способ проверки аффилиата №2

Если отсечь вхождение домена, то получится вот так:

Способ проверки аффилиата №2 Способ проверки аффилиата №2

Убедились, что целевые сайты отображаются в результатах выдачи. Дальше компонуем запрос, чтобы он был релевантен обоим сайтам, для этого используем оператор “|” (логическое или), схематично запрос будет выглядеть так: "тайтл сайта №1" | "тайтл сайта №2"

Если ресурсы аффилируются, то в выдаче останется только один сайт:

Способ проверки аффилиата №2

Для проверки можно сформировать подобный запрос для заведомо не аффилированных сайтах. Допустим, пусть это будет М.Видео и Эльдорадо:

Способ проверки аффилиата №2

Нерабочие методы, на которые не стоит тратить время

Следующие способы когда-то были в ходу, но сейчас не работают, привожу их только для ознакомления, чтобы вы не тратили на них время, если вдруг найдете описание их работы на каком-нибудь стороннем блоге.

Итак, уже не рабочий способ №1

  1. Заключался он в том, что нужно задать специальный запрос к выдаче, которому были бы релевантны оба ресурса. Выглядел такой запрос так: url:164.ru url:56.ru
    Нерабочий способ с запросом url:164.ru url:56.ru Еще пример нерабочего запроса
  2. Дальше нужно было сгруппировать выдачу, дописав к запросу какую-нибудь белиберду после оператора отрицания, например так url:164.ru url:56.ru ~~ url:dfgfgf
    Нерабочий запрос вида url:164.ru url:56.ru ~~ url:dfgfgf Нерабочий запрос
    В итоге если оставался один сайт из двух, то можно было определить наличие аффилирования, если в выдаче по прежнему продолжали находиться оба сайта, то можно было сделать вывод, что аффилирования нет.
  3. Эту статью и скриншоты выше я делал недели три назад, но по стечению обстоятельств публикация затянулась и буквально перед самым размещением я заметил, что запрос типа url:164.ru url:56.ru работает уже иначе — теперь в выдаче присутствует только 1 результат независимо от того, есть ли между сайтами аффилированность или нет.
    Нерабочий способ с запросом url:164.ru url:56.ru Нерабочий способ

Уже не рабочий способ №2

Способ был похож на вышеописанный, разница только в том, что вместо оператора url использовался domain, а сам запрос выглядел вот так: domain:164 domain:56. Суть заключалась в том, что если в выдаче присутствовало оба сайта, то можно было предположить, что фильтра нет, если же в выдаче присутствовал только 1 сайт, то следующим шагом шла проверка — к урл дописывался параметр &pag=u (тем самым мы разгруппировывали выдачу), и если после этого второй сайт появлялся в результатах выдачи, то можно было определить наличие аффилиат-фильтра.

Раньше это выглядело примерно так:

Нерабочий способ с запросом domain:164 domain:56 Нерабочий способ с запросом domain:164 domain:56

Сейчас работа этого оператора, судя по всему, тоже изменилась и теперь в результатах выдачи показывается только один из сайтов. Пример текущей работы оператора:

Нерабочий способ проверки аффилиата Нерабочий способ проверки аффилиат-фильтра
Нерабочий способ проверки аффилированности

Как выйти из-под аффилиат-фильтра в Яндексе

Устранить возможные причины наложения фильтра

Если фильтр был наложен алгоритмическим способом, то необходимо устранить все возможные причины его наложения. Санкции будут сняты автоматически сразу же после того, как алгоритм перестанет фиксировать эти причины.

По опыту: этот период может занимать от нескольких дней, до нескольких недель. Если фильтр наложен вручную, то сниматься он должен тоже вручную, сам по себе он не пропадет. Поэтому после устранения возможных причин наложения фильтра надо обязательно написать Платонам.

Написать письмо Платонам

Перед обращением к Платонам надо знать одну вещь — Яндекс не признает такого понятия как аффилиат-фильтр. Поэтому вы тоже не должны оперировать этим понятием, если хотите получить ответ по существу.

Могу дать совет, основанный на личном опыте: заранее определите с каким ресурсом аффилируется ваш сайт, соберите статистику по позициям сайтов в выдаче. В обращении задавайте вопрос с акцентом на последствиях, сразу сообщите, что ваши сайты принадлежат разным компаниям, если есть подозрения из-за чего поисковик может думать иначе, то стоит добавить дополнительные обоснования.

Для примера: ниже переписка с Платоном по поводу аффилирования моего продвигаемого сайта с одним из конкурентов. Предположительно причиной наложения санкций мог послужить одинаковый плагин формирования информации о доставке (пересечение по дизайну, пунктам доставки, стоимости доставки), так же на сайтах есть пересечение по ассортименту — около 80% товаров одинаковые и по части позиций присутствуют идентичные цены (совпадение):

Переписка с Платоном по поводу аффилирования

После этого обращения где-то через пару недель ситуация изменилась и сайт начал нормально ранжироваться.

Напоследок: что пишут сами поисковики по поводу аффилиатов?

В разделе правил показа в Директе есть следующий пункт:

«При этом сайты признаются сходными при совпадении значительной части ассортимента предлагаемых на сайтах товаров (работ, услуг), реализуемых в одном регионе, и/или наличии других признаков, позволяющих предположить, что предлагаются одни и те же товары одним и тем же (аффилированными, имеющими тесную взаимосвязь) поставщиком, вне зависимости от незначительного различия ассортимента, разного дизайна, структурной организации сайтов, отличия цен, а также от принадлежности (администрирования) сайтов разным(-и) лицам(-и).

При размещении Рекламных объявлений по соответствующему ключевому слову (словосочетанию) из Группы объявлений, признанных сходными, Пользователю показывается только одно объявление, у которого значение, рассчитанное с учетом показателей: прогноз Кликабельности, Цена за Клик / CPM и Коэффициент качества, является наилучшим. Все остальные Рекламные объявления такой группы признаются дублирующими и не показываются (не размещаются)»

В требованиях к рекламным материалам Яндекс.Маркета так есть упоминание аффилиатов:

«Яндекс может по своему усмотрению отказать в размещении нескольких магазинов (либо сайтов, относящихся к одному магазину), предлагающих товары в одном регионе и позволяющих предположить наличие аффилированности, взаимозаменяемости или иной тесной взаимосвязи между этими магазинами (сайтами), либо произвести группировку пересекающегося ассортимента со скрытием дублирующих предложений таких магазинов (сайтов).

При этом сайты признаются сходными вне зависимости от различия ассортимента, разного дизайна, структурной организации сайтов, отличия цен и принадлежности сайтов разным лицам. Пересекающимся ассортиментом признаются товарные предложения сходных магазинов, относящиеся к одному и тому товару, включая как идентичные по описанию товарные предложения, так и имеющие отличия по отдельным характеристикам (модификациям) одного и того же товара».

Google не оперирует понятием аффилиаты, а использует понятие “партнерские сайты”, в своем разделе помощи о некачественных сайтах пишет:

«Как указано в нашем руководстве для веб-мастеров, на сайтах нужно размещать оригинальный контент, представляющий интерес для пользователей. Это особенно важно для разработчиков, участвующих в партнерских программах. Позиции партнерских сайтов в результатах поиска могут быть невысокими, так как на них обычно публикуются описания продуктов, также представленные на других ресурсах партнерской сети. Это означает, что на таких сайтах мало оригинального контента, например дополнительных сведений о товарах и их категориях.

Специалисты Google считают, что некачественные партнерские сайты бесполезны для пользователей, особенно если в партнерской сети много подобных ресурсов. Такие сайты зачастую представляют собой группы шаблонных или низкокачественных страниц, на которых размещен один и тот же контент. Пользователям не нравится, когда они видят в результатах поиска множество страниц с одинаковым содержанием.»

Вот и все на сегодня. Спасибо за внимание. Задавайте вопросы и пишите комментарии.

А в самом конце я хочу анонсировать будущий seo-пост от Алексея, который он охарактеризовал так: «короче, это будет что-то типа описания алгоритма действий при оптимизации ресурса под ББ + пара небольших примеров, так что это еще и наполовину кейс».

До связи, друзья.

С уважением, Александр Алаев
 
Ерунда и баянЪ!Зачет! Плюсую!
+6
 
Оптимизация сайта

Профессиональный технический аудит и оптимизация вашего сайта.
Тот самый необходимый «фундамент» для успешного продвижения.

от 15 000 руб.
Продвижение сайта

Комплексный подход к решению поставленных задач, будь то достижение заветных позиций в ТОП 10 или увеличение трафика на сайт. В стоимость уже включены полный технический аудит и оптимизация сайта.

от 20 000 руб.
Консультация

У вас недостаточно знаний?
Нужен ответ на ряд вопросов?
Хотите узнать мнение эксперта?
Вы задаете вопрос — я отвечаю!

2 500 руб./час
 
Получай новости блога АлаичЪ'а на e-mail:
 
Другие посты из категории SEO:
  1. Дед Саша (2 комм.)

    Спасибо за подробный мануал.

    Алаичъ, как думаешь, а информационные сайты могут за аффилировать?

    • АлаичЪ

      Не думаю, что инфосайты могут быть аффилированы. Во-первых, там нет особо маркеров, которые могли бы об этом сигнализировать: ну, один ip, один аккаунт в метрике/вебмастере, одинаковый id в блоках adsense/direct? Мне кажется, это не серьезно и не точно. Да и зачем? Это не коммерческий сегмент...зачем тут шорох наводить. Главное — уникальность контента. Если посетителей удовлетворяет информация на сайтах, плевать, кому они принадлежат. В то время как на коммерческих сайтах-аффилиатах одинаковые товары или качество услуг, например. Это сильно упрощенно, конечно.

      Мое мнение — нет, и уверен я в этом на 95% :)

      • Дед Саша (2 комм.)

        Ну да, один аккаунт в метрике и вебмастере и 5 статей на 5 сайтах, отвечающих на один запрос.

        Тоже склоняюсь к тому, что аффилировать инфо сайты бредовая затея, но интересно было узнать твое мнение, тем более статья по теме ) спасибо

  2. Юрий (4 комм.)

    1) Интересна взаимосвязь аффилирования в директе и в сео. А именно если в директе яндекс посчитает сайты аффилированными, то в СЕО он тоже их объединит? И наоборот. (хотя я понимаю, что не очень уместно у СЕОшника про директ спрашивать)

    2) Можно ли загнать таким образом конкурента под фильтры? Особенно если есть четкая взаимосвязь в варианте выше.

    3) Какой из 2ух сайтов уйдет под фильтр? Тот что был позже создан?

    4) Если владелец сайта потерял все доступы к предыдущему сайту и не может их никак восстановить, то что тогда делать?

    5) Есть ли примеры, когда удавалось получить большое количество мест в топ 10 с пачкой сайтов фактически аффилированных, но при этом долго не попадать под фильтры? (в директе примеры с захватом первых 3-4 мест были и успешные)

    6) Как доказать яше, что ваш сайт только 1, а все остальное кто-то другой? А если агенство где заказали сайт просто скопировала один из вариантов?

    7) Что если делается шаблонный сайт? Стилистика и все прочее будут похожими с десятками других. Всякие тексты вообще давно воруют.

    ну и наконец 8) А на стадии создания сайта есть возможности понять как-то есть ли уже очень похожие сайты и шанс попадания под фильтр

    • Алексей (22 комм.)

      1) я думаю, что это было бы интересно узнать очень многим, в том числе и мне, но увы — это довольно сложно проверить на практике

      2) —

      3) возможно вы невнимательно читали — фильтр накладывается сразу на все аффилированные сайты, очередность создания не имеет значения.

      4) не сталкивался, не подскажу, возможно АлаичЪ подскажет

      5) к сожалению пачки сайтов двигать еще не доводилось — примеров нет.

      6) для начала посмотрите есть ли аффилирование вообще, если есть, то пишите Платонам, пример письма в статье есть.

      7) ничего хорошего не будет (простите, какой вопрос, такой и ответ)

      8) смотря что вы имеете в виду похожим, разве что сайты на одном шаблоне. Как вариант в коде сайта найти название темы (типа .../themes/Nametheme/...) и загуглить по ней или поискать в яндекс- и гугл-картинках изображения, которые используются в шаблоне. Можно руками посмотреть сайты, которые в топе по основным ключевым словам своей ниши

    • АлаичЪ

      2) Я не думаю, что это возможно. Иначе борьба с конкурентами была бы слишком простой, многие бы этим пользовались. Кроме самих факторов, тут нужно еще в одной весовой категории оказаться двум сайтам. Очевидно же, если создать какой-то пусть даже более или менее приличный сайт и подогнать его по всем факторам риска к любому из крутых сайтов, ozon, holodilnik и даже кого-то сильно попроще, то...ну сами знаете, ничего не случится.

      4) И хостинг с доменом бесконечно самопродлеваться наверное будут, пока владелец память не обретет? Что за небылицы! Есть масса вариантов, как "вспомнить все"!

  3. coolakov (7 комм.)

    > "Собрать список всех конкурентов по этим запросам в топ-10 или топ-30 выдачи. В этом плане очень сильно выручает сервис http://coolakov.ru/tools/razbivka/"

    А научите, пожалуйста, как через razbivka конкурентов собирать?) А то мне приходится собирать их через http://coolakov.ru/tools/most_promoted/

    Чем ваш способ удобнее?

    • Алексей (22 комм.)

      В посте не ту ссылку указали, конечно же http://coolakov.ru/tools/most_promoted/

      спасибо, поправим

  4. Валентин (1 комм.)

    Хорошая статья, но вы не упомянули последний предложенный вариант проверки на аффилиат от Людкевича (https://www.searchengines.ru/opredelenie-affiliatov-v-yandekse.html), который он предложил после того как Яндекс сократил число операторов.

    На данный момент он вполне рабочий.

  5. Павел (1 комм.)

    Из опыта могу сказать, что аффилированность в рекламе (директ и маркет) почти не победить (оочень редкие случаи). Еще могу сказать, что достаточно часто регламент Яндекс и его исполнение им же могут находиться в параллельных мирах, например, если я хочу показывать в директе объявление на один и тот же товар или фразу на 2 моих сайта, то директ не разрешает, в то же время выдача директа забита одинаковыми объявлениями нашего конкурента с редиректами на их главный сайт и Яндекс никак не реагирует на жалобы.

  6. Злой (5 комм.)

    Есть ошибки в вашей статье.

    уже не рабочий способ №1 вполне себе рабочий, вот пруф с вашими же примерами: http://prntscr.com/k556bh

    чуть видоизменить запрос нужно:

    url:164.ru | url:56.ru ~~ url:dfgfgf

    еще пример: http://prntscr.com/k557sn

    Этот способ помогает отлавливать аффилиаты автоматически по большому списку пар домен-домен.

    Далее:

    >А дальше нужно проверить позиции по этим запросам вашей площадки и площадкам конкурентов.

    Где-то недели три назад Яндекс отключил влияние аффилиатного фильтра на xml выдачу. Теперь если собрать через xml позиции по двум зафильтрованным сайтам, то оба будут в топе, а если смотреть серп, то только один.

    Так же примерно месяц назад заработал уже бородатый способ исключения одного из сайтов из серпа вида

    ключевой запрос ~~ site:domen.ru

    Статью пора переписать уже :((((

    • Алексей (22 комм.)

      Спасибо, очень ценная информация.

      У вас какой-то постоянный мониторинг идет или откуда такая информация по срокам?

      "Где-то недели три назад Яндекс отключил влияние аффилиатного фильтра на xml выдачу"

      "Так же примерно месяц назад заработал уже бородатый способ".

      По не рабочему способу 1 — я тестировал разные запросы, в том числе тот, который вы указали — он не работал на момент написания статьи.

      Обязательно апнем тему.

  7. Злой (5 комм.)

    Постоянно мониторили весь пул сайтов, недели 3-4 назад поломалось.

    По сути аффилиат фильтр в XML выдаче больше не работает.

    Его можно заметить, только спарсив живой серп.

    На большом кол-ве запросов это дороговато. Думаем, че делать.

Оставь комментарий, Бро!

· Малоинформативные комментарии или комментарии, не содержащие вопрос, удаляются.
· В поле URL оставляйте ссылку только на свой сайт/блог. Эта ссылка для админа, посетители ее не увидят.
· Любой html-код отображается в виде текста, любые ссылки неактивны.
· Для спаммеров - БЛОГ НЕ DOFOLLOW!!!