Автор
 Подробности
Александр Алаев

Александр Алаев

Мы повышаем уровень услуг на рынке и нам не стыдно за результат! Имеются успешные кейсы в областях: недвижимость, авто, текстиль, продажа билетов, товары для взрослых, сувениры, мебель, кондиционирование, подарки, спорттовары, спецтехника, грузоперевозки, юридические услуги, и др.

Новый фильтр АГС Яндекса

Привет, друзья. Если вы хотя бы в полглаза следите за seo-отраслью, то просто не могли пропустить новость от Яндекса: сайты, продающие ссылки, будут понижены в результатах поиска и получат фильтр АГС (официальная инфа на блоге Яндекса).

Сначала я не придал заявлению большого значения, ведь это было всего лишь предупреждение. И только ради интереса решил-таки проверить ссылочные кампании нескольких проектов в Sape.

Это было не предупреждение…
Сказать, что я был удивлён результатом, это мягко сказано…

И вот почему:

Случайная выборка сайтов попавших под АГС по одному из проектов

Это скриншот случайной выборки сайтов попавших под АГС по одному из проектов.
Рассматривая эту выборку из 30 случайных сайтов, заметим, что 33% сайтов в ЯК, 70% сайтов в DMOZ, всего 3 сайта имеют нулевой PR, а несколько даже с PR=5 и очень много четверок. (Ну да, я помню, что PR больше не будут обновлять и вряд ли это уже можно объективной характеристикой считать, но тем не менее). У сайтов нет проблем с индексацией. Все эти сайты вообще никогда бы не вызвали у меня подозрений…


Масштаб трагедии

Возьмем мой проект, статистику которого вы видели выше: всего 659 ссылок, под АГС попали 78 сайтов – это 12%. Притом, что ссылки покупались с моего персонального вайтлиста (взял базу сапы из 320к доноров и выбрал из них 20к лучших сайтов). Пообщался с коллегами и товарищами – у них процент попавших под АГС доноров в биржах доходит до 50%! В среднем 20-40%.

Для тех, кто в танке напомню, что с 2014 года Яндекс помечает сайты под АГС обнулением тИЦ, так же АГС не приводит к выпадению страниц из индекса. Проверить сайт на наличие АГС фильтра можно запросом https://yaca.yandex.ru/yca/cy/ch/yakutia.info/. Если будет написано «Индекс цитирования (тИЦ) ресурса — не определен», значит ваш сайт под фильтром.

А еще хочу процитировать свой пост с Фэйсбука:

Да, АГС ударил что есть мочи! Я бы сказал, космический масштаб. Проверил несколько ссылочных кампаний в сапе, где закуп шел по вайтлисту. Даже при таком раскладе от 10 до 15% доноров срулили под АГС. Закономерности пока не нашел никакой. Реально очень много сайтов качественных со всех точек зрения. Не сателлиты, а СДЛ в общепринятом смысле.
Это ударит по ссылокоторговле в лице продавцов намного сильнее, чем Минусинск по покупателям ссылок. А рынок-то тот же самый! Тяжелые времена для бирж.
Вангую, что статистика бирж по сайтам под АГС в процентном соотношении взлетит до невероятных высот. Ждем обновления глобальной статистики бирж в «Пульсе бирж».

Масштаб действительно внушительный, пришествие фильтра заметили все! Актуальные данные в цифрах и на графике уже сегодня покажет наш Пульс Бирж.

А так как данный пост я начал писать еще на прошлой неделе, я не мог вот просто так терять время и ждать, я попросил сделать несколько интересных выгрузок из базы сервиса CheckTrust:

  1. Выгрузка всех сайтов, которые участвуют в бирже Sape
  2. Выгрузка всех сайтов из биржи Sape под АГС
  3. Выгрузка всех сайтов из биржи Sape не под АГС

(На самом деле выгрузок сделали намного больше и всяких разных, но когда я начал анализировать данные, понял насколько это долго, и решил остановиться на Sape).


Анализ сайтов под АГС на базе выгрузки доноров из биржи Sape

В нашей базе более 500 тысяч сайтов, помеченных как принадлежащие бирже Sape, но это все сайты когда-либо загруженные из Sape за последний примерно год. За год многое могло поменяться: какие-то сайты перестали существовать вовсе, какие-то перестали участвовать в бирже и т.д. Поэтому я решил взять для анализа все сайты, выгруженные с Sape за последние 90 дней. Таких сайтов в базе оказалось 90407 штук.

В общем-то, довольно репрезентативная выборка, как в масштабах биржи, так и торговли арендными ссылками в целом. А учитывая, что после введения Минусинска, в Чектраст захаживали много очень крупных сайтов с десятками тысяч сапа-доноров на борту, становится совсем интересно.

На основании полученных данных я постарался сделать несколько выводов и наблюдений. Спешу поделиться с вами.

Изначально, конечно, я проверил все самые популярные гипотезы. Пузомерки (ЯК, Дмоз, PR, Ahrefs Rank), возраст, посещаемость, социальные отклики, а так же свои Траст и Спам.
Краткая (но при этом довольно большая) таблица находится под катом.

Раскрыть таблицу>
Исследование сайтов из биржи Sape.Ru
Сайты из биржи за последние 90 дней
Сайтов под АГС: Сайтов НЕ под АГС: Разница
Всего сайтов: 90407 (100%) 8289 (9,17%) 82118 (90,83%)
 
Присутствуют в ЯК 1577 19,03% 9424 11,48% 1,66 0,60
Присутствуют в DMOZ 1612 19,45% 9033 11,00% 1,77 0,57
PR=0 2348 28,33% 28315 34,48% 0,82 1,22
PR не 0 5948 71,76% 53802 65,52% 1,10 0,91
PR=5 298 3,60% 1830 2,23% 1,61 0,62
PR=6 50 0,60% 419 0,51% 1,18 0,85
PR=7 4 0,05% 63 0,08% 0,63 1,59
PR=8 1 0,01% 8 0,01% 1,24 0,81
PR=9 0 0,00% 4 0,00% 0,00
 
Whois не определен 824 9,94% 12292 14,97% 0,66 1,51
Whois 2015 113 1,36% 3552 4,33% 0,32 3,17
Whois 2014 349 4,21% 5672 6,91% 0,61 1,64
Whois 2013 723 8,72% 6314 7,69% 1,13 0,88
Whois 2012 945 11,40% 8384 10,21% 1,12 0,90
Whois 2011 785 9,47% 7499 9,13% 1,04 0,96
Whois 2010 847 10,22% 8124 9,89% 1,03 0,97
Whois 200x 3671 44,29% 29617 36,07% 1,23 0,81
Whois 199x 37 0,45% 565 0,69% 0,65 1,54
 
Ahrefs Rank = 0 152 1,83% 2312 2,82% 0,65 1,54
1=< AR =<9 49 0,59% 633 0,77% 0,77 1,30
10=< AR =<19 168 2,03% 1888 2,30% 0,88 1,13
20=< AR =<29 495 5,97% 6989 8,51% 0,70 1,43
30=< AR =<39 1931 23,30% 27101 33,00% 0,71 1,42
40=< AR =<49 3901 47,06% 34149 41,59% 1,13 0,88
50=< AR =<59 1538 18,55% 6646 8,09% 2,29 0,44
60=< AR =<69 50 0,60% 1577 1,92% 0,31 3,18
70=< AR =<79 3 0,04% 819 1,00% 0,04 27,56
 
Посещаемость LI 0 — 10 и без счетчика 5031 60,69% 57306 69,78% 0,87 1,15
LI 11 — 99 1095 13,21% 15324 18,66% 0,71 1,41
LI 100 — 999 1475 17,79% 7709 9,39% 1,90 0,53
LI 100 — 199 446 5,38% 3233 3,94% 1,37 0,73
LI 200 — 299 291 3,51% 1582 1,93% 1,82 0,55
LI 300 — 399 186 2,24% 886 1,08% 2,08 0,48
LI 400 — 499 140 1,69% 617 0,75% 2,25 0,44
LI 500 — 599 95 1,15% 430 0,52% 2,19 0,46
LI 600 — 699 98 1,18% 333 0,41% 2,92 0,34
LI 700 — 799 89 1,07% 252 0,31% 3,50 0,29
LI 800 — 899 65 0,78% 213 0,26% 3,02 0,33
LI 900 — 999 64 0,77% 164 0,20% 3,87 0,26
LI 1000 — 9999 592 7,14% 1599 1,95% 3,67 0,27
LI 10000 и более 49 0,59% 179 0,22% 2,71 0,37
 
Кол-во Твитов на главную = 0 3892 46,95% 49312 60,05% 0,78 1,28
Твитов 1 — 9 2584 31,17% 22371 27,24% 1,14 0,87
Твитов 10 — 99 1445 17,43% 8487 10,34% 1,69 0,59
Твитов 100 — 999 315 3,80% 1639 2,00% 1,90 0,53
Твитов 1000 — 9999 51 0,62% 285 0,35% 1,77 0,56
10000 и выше 2 0,02% 23 0,03% 0,86 1,16
 
Кол-во ВК шарингов на главную = 0 5191 62,63% 65539 79,81% 0,78 1,27
ВК шаре 1 — 9 1866 22,51% 12159 14,81% 1,52 0,66
ВК шаре 10 — 99 948 11,44% 3468 4,22% 2,71 0,37
ВК шаре 100 — 999 251 3,03% 822 1,00% 3,03 0,33
ВК шаре 1000 — 9999 30 0,36% 119 0,14% 2,50 0,40
10000 и выше 3 0,04% 11 0,01% 2,70 0,37
 
Кол-во FB шарингов на главную = 0 4639 55,97% 54608 66,50% 0,84 1,19
FB шаре 1 — 9 2462 29,70% 19494 23,74% 1,25 0,80
FB шаре 10 — 99 1016 12,26% 6547 7,97% 1,54 0,65
FB шаре 100 — 999 161 1,94% 1279 1,56% 1,25 0,80
FB шаре 1000 — 9999 7 0,08% 128 0,16% 0,54 1,85
10000 и выше 3 0,04% 35 0,04% 0,85 1,18
 
Кол-во G+плюсов на главную = 0 5789 69,84% 64610 78,68% 0,89 1,13
G+плюс 1 — 9 1841 22,21% 13593 16,55% 1,34 0,75
G+плюс 10 — 99 519 6,26% 2819 3,43% 1,82 0,55
G+плюс 100 — 999 112 1,35% 799 0,97% 1,39 0,72
G+плюс 1000 — 9999 29 0,35% 297 0,36% 0,97 1,03
10000 и выше 0 0,00% 0 0,00%
 
CheckTrust Trust не определен 3 0,04% 97 0,12% 0,31 3,26
Trust = 0 849 10,24% 13228 16,11% 0,64 1,57
1=< Trust =<9 2316 27,94% 28072 34,18% 0,82 1,22
10=< Trust =<19 1631 19,68% 16384 19,95% 0,99 1,01
20=< Trust =<29 1138 13,73% 11059 13,47% 1,02 0,98
30=< Trust =<39 789 9,52% 5811 7,08% 1,35 0,74
40=< Trust =<49 476 5,74% 2834 3,45% 1,66 0,60
50=< Trust =<59 324 3,91% 1755 2,14% 1,83 0,55
60=< Trust =<69 241 2,91% 1204 1,47% 1,98 0,50
70=< Trust =<79 207 2,50% 795 0,97% 2,58 0,39
80=< Trust =<89 146 1,76% 428 0,52% 3,38 0,30
90=< Trust =<99 91 1,10% 220 0,27% 4,10 0,24
Trust = 100 78 0,94% 232 0,28% 3,33 0,30
 
CheckTrust Spam не определен 523 6,31% 11930 14,53% 0,43 2,30
Spam <10 5061 61,06% 49002 59,67% 1,02 0,98
10=< Spam =<19 1590 19,18% 12461 15,17% 1,26 0,79
20=< Spam =<29 468 5,65% 3724 4,53% 1,25 0,80
30=< Spam =<39 230 2,77% 1692 2,06% 1,35 0,74
40=< Spam =<49 134 1,62% 959 1,17% 1,38 0,72
50=< Spam =<59 74 0,89% 600 0,73% 1,22 0,82
60=< Spam =<69 56 0,68% 397 0,48% 1,40 0,72
70=< Spam =<79 29 0,35% 276 0,34% 1,04 0,96
80=< Spam =<89 31 0,37% 181 0,22% 1,70 0,59
90=< Spam =<99 14 0,17% 136 0,17% 1,02 0,98
Spam = 100 79 0,95% 760 0,93% 1,03 0,97

А вот краткие выводы:

  • Сайты из Яндекс Каталога попадают под АГС в 1,7 раза чаще.
  • Сайты из каталога DMOZ попадают под АГС в 1,8 раз чаще.
  • Сайты с высоким PR и не нулевым PR попадают под АГС чаще.
  • Сайты с датой создания 2015 по Whois попадают под АГС 3,2 раза реже!
  • Сайты с датой создания 2014 по Whois попадают под АГС 1,6 раза реже!
  • Сайты старше двух лет (по Whois) больше подвержены риску.
  • Сайты с посещаемостью по LI от 100 до 700 попадают под АГС в 2 раза чаще.
  • Сайты с посещаемостью по LI от 700 до 10000 попадают под АГС в 4 раза чаще.
  • Сайты с посещаемостью по LI выше 10000 попадают под АГС почти в 3 раза чаще.
  • Сайты с высокой социальной активностью попадают под фильтр чаще.
  • Сайты с высокими показателями качества попадают под фильтр чаще.

В голове не укладывается, не так ли!?
На какой параметр ни посмотри, складывается общая картина того, что под фильтр попали в большинстве своем старые крутые сайты, имеющие завидные пузомерки, эти сайты имеют реально высокую посещаемость, социальные сигналы их всех соцсетей. Все те параметры, на которые большинство из нас обычно и обращают внимание при выборе донора.

Но вот тут-то и лежит ответ на вопрос!
При равной стоимости всегда в первую очередь раскупаются ссылки с сайтов в ЯК и/или DMOZ. Высокий PR – отлично! Посещаемость – шикарно! Ах, старый сайт, уже 10 лет – так точно под фильтр не попадет никогда…

Ведь так мы мыслим? Мы всегда отдаем предпочтение более прокачанным сайтам. Ссылки с сайтов в каталогах и высоким тИЦ при средних ценах разлетаются как пирожки.

Это в точности как Минусинск, но с другой стороны.
Вспомните, Минусинск призван покарать сайты, которые покупают seo-ссылки. В первую очередь были наказаны лидеры отрасли. Они же лидеры закупок ссылок. Вероятно, что наказали минимум сайтов, закупающих максимум ссылок.

Новый АГС призван покарать сайты, которые продают seo-ссылки. Сейчас прошла первая волна санкций, наказаны опять же лидеры отрасли, продающие основную массу ссылок. Наказали минимум сайтов, продающих максимум ссылок.

Я уверен, искать запутанные закономерности не стоит. Критерий до боли прост – количество. Количество продажных ссылок с сайта. Если АГС будут раскатывать волнами так же, как Минусинск, то нижняя граница допустимого значения продажных ссылок будет постепенно снижаться, и под следующий удар попадут сайты со схожими характеристиками.

Теперь надо проверить данную гипотезу.

Я построил распределение трех групп сайтов по параметру исходящих уникальных ссылок с домена. Группы соответственно: сайты под АГС (8289 сайтов, 9,17%), сайты не под АГС (82118 сайтов, 90,83%) и общая база сайтов (90407 сайтов, 100%).

БИНГО! Гипотеза полностью подтвердилась – зависимость наложения фильтра от количества исходящих ссылок очень заметна. Практически пятикратная разница – сайты, попавшие под АГС, продают в 5 раз больше ссылок!
Сайты, попавших под АГС имеют от 289 до 1327 исходящих ссылок, в то время как непострадавшие сайты от 64 до 240.

Уник. Исх. ссылок
АГС
Уник. Исх. ссылок
НЕ АГС
Уник. Исх. ссылок
Вся база
Сайтов 8289 82118 90407
Ср. знач 1198,68 336,05 415,14
Мин. Знач 0,00 0,00 0,00
Q1 46,00 14,00 16,00
Медиана 288,00 64,00 70,00
Q3 1327,00 240,00 280,00
Макс. Знач 49691,00 88301,00 88301,00
График распределения уникальных исходящих ссылок

Следующим шагом логично было проверить индексацию сайтов в Яндексе.
Как видно из графика, сайты попавшие под АГС имеют и больше страниц в индексе. От 5 до 10 раз. Все логично, чтобы продать больше ссылок, надо иметь больше страниц.

Яндекс Индекс
АГС
Яндекс Индекс
НЕ АГС
Яндекс Индекс
Вся база
Сайтов 8227 81544 89771
Ср. знач 41129,14 15889,84 18202,88
Мин. Знач 0,00 0,00 0,00
Q1 299,50 68,00 75,00
Медиана 2096,00 418,00 478,00
Q3 20966,00 2483,00 2995,50
Макс. Знач 7639627,00 88620414,00 88620414,00
График распределения проиндексированных страниц в Яндексе

Надо посмотреть фактор отношения страниц сайта к исходящим ссылкам.
Явной зависимости от количества исходящих ссылок на количество страниц в индексе нет. Сайты под АГС имеют до 16 страниц на одну проданную ссылку, сайты не под АГС имеют до 21 страницы на проданную ссылку.

Отнош Стр. в индексе / Исх. ссылки
АГС
Отнош Стр. в индексе / Исх. ссылки
НЕ АГС
Отнош Стр. в индексе / Исх. ссылки
Вся база
Сайтов 7895 73290 81185
Ср. знач 44,37 60,82 59,22
Мин. Знач 0,00 0,00 0,00
Q1 2,25 2,00 2,02
Медиана 5,59 5,97 5,92
Q3 15,95 20,59 20,02
Макс. Знач 30522,00 63296,00 63296,00
График распределения отношения поиндексированных страниц к исходящим ссылкам

Давайте проверим фактор количества уникальных входящих ссылок на сайт.
Тоже ничего криминального, сайты с бОльшим количеством страниц (и исходящих ссылок) имеют больше входящих ссылок.

Уник. Вх. ссылок
АГС
Уник. Вх. ссылок
НЕ АГС
Уник. Вх. ссылок
Вся база
Сайтов 8289 82118 90407
Ср. знач 332,79 152,53 169,05
Мин. Знач 0,00 0,00 0,00
Q1 40,00 12,00 14,00
Медиана 134,00 43,00 47,00
Q3 376,00 124,00 141,00
Макс. Знач 16025,00 67705,00 67705,00
График распределения кличества входящих ссылок

Для полноты картины посмотрим распределение отношения количества исходящих ссылок к входящим. Есть небольшая зависимость – отношение исходящих ссылок к входящим для сайтов под АГС несколько выше. Но эта зависимость не такая очевидная, как могла бы быть.
Отношение кол-ва ссылок для сайтов под АГС от 2,4 до 6,4, а для сайтов не под АГС от 1,6 до 4,6.

Отнош Исход / Вход
АГС
Отнош Исход / Вход
НЕ АГС
Отнош Исход / Вход
Вся база
Сайтов 8176 79224 87400
Ср. знач 6,71 6,11 6,16
Мин. Знач 0,00 0,00 0,00
Q1 0,72 0,43 0,45
Медиана 2,44 1,59 1,66
Q3 6,36 4,59 4,75
Макс. Знач 955,60 27302,00 27302,00
График распределения отношения исходящих ссылок к входящим

Что же мы получаем в итоге. Новый фильтр АГС-- зависит от количества продажных ссылок на сайте. При этом зависимости от отношения к количеству страниц сайта нет. Сайты, имеющие много исходящих ссылок, имеют пропорционально больше страниц и входящих ссылок. То есть основной критерий наложения санкций – абсолютное количество seo-ссылок.


SEO Conference 2015 — Видеозапись моего доклада про обновленный АГС с конференции из Казани

Спустя две недели после публикации данного поста мне довелось выступить на известной сеошной конференции в Казани — SEO Conference 2015, где я рассказывал практически тоже самое, что вы прочитали в данном посте. Но в рамках подготовки доклада я провел дополнительную аналитику, построил наглядные графики и сделал соответствующие выводы (кстати, немного отличающиеся от выводов в конце поста, так что рекомендую посмотреть видео).

Ниже моя презентация с которой я выступал: