Фильтр АГС от Яндекса или «катастрофа» для оптимизатора. Теория

Всем привет! Пока один из авторов (который Павел) сдаёт сессию, Михаил мне предложил написать в блог несколько гостевых статей. Правда предложил на самом деле я)), но ближе к делу.

На общем собрании мы решили, что я попытаюсь рассказать про наиболее нашумевший фильтр от Яндекса под грозным именем АГС. А рассказать мне действительно есть о чём, ведь на моём счету порядка 15 попавших под АГС сайтов и несколько удачных и неудачных выводов из под него.

Намнём с предыстории.

Около 2-ух лет назад весь Рунет, в том числе его прекрасная половина (я имею в виду SEO блоггеров) клепали в бесконечном количестве сателлиты для одной единственной цели — заработке нескольких рублей в бирже Sape. Уже тогда были такие источники «белого заработка» как Блогун или Google AdSense, но именно Sape кормила большую часть веб-мастеров в Рунете. Лично я зарабатывал порядка 200 рублей в сутки (тогда для меня это было круто!).

Такой вид заработка, конечно же, значительно сказывался на внешнем облике ресурсов и их наполнении — чаще всего сателлиты выглядели как несколько сотен генерированных программами с публичным шаблоном (естественно на WordPress). Конечно же, на них сразу после индексации Яндексом ставилась Sape и на счёт начинали капать первые копейки. Естественно, за судьбу сайтов переживали и даже пытались их сделать более человечными, но дальше иконок для RSS или уникальной картинки в шапке дело не доходило. Тогда никто не верил, что Яндекс или даже гигант Google смогут научиться определять продажные ссылки и соответственно влиять на судьбу ресурса.

В один прекрасный момент случился настоящий шок!

Только за одну ночь из индекса Яндекса полностью или частично выпало порядка 30-40% всех сайтов в Рунете. Вы только вдумайтесь в эти цифры — это даже не десятки тысяч, а возможно миллионы ресурсов. SEO форумы, такие как Searchengines, сразу запестрели новыми темами про смену алгоритмов Яндекса и возможный глюк, который скоро исправят (у меня лично в первый день выпало 4 сайта).

Официальное объявление о запуске (скорее о «докрутке») нового фильтра появилось спустя неделю на блоге команды Яндекса. Именно тогда было названо имя АГС. Кто-то расшифровал эту аббревиатуру как «Анти Говно Сайт», кто-то «Анти Генерированные Страницы», а символом алгоритма стало смертоносное оружие Автоматический гранатомет АГС-17, которым снабжается пехота российской армии.

Действие данного фильтра можно сравнить с этим пулемётом: быстро, масштабно, без шансов для противника (уже тогда я потерял более 10 своих сайтов). А этим самым противником стало бесчисленное количество псевдо — сайтов, созданных для заработка на продаже ссылок. Как заявил Яндекс, эта мера была вынужденной, ведь численность сателлитов для Sape в то лето достигла огромных масштабов и поисковая выдача становилась «нечестной». Проще говоря, Яндексу стало сложно правильно ранжировать коммерческие поисковые запросы, да и растущий рынок купли — продажи ссылок в биржах стал угрозой для объёмов рынка РСЯ — Рекламной Сети Яндекса. Всем известно, что «косвенно» рынок SEO мешает продажам контекстной рекламы и наоборот (оптимизаторы для поисковых систем как паразит на теле человека, который мешает работать!).

SEO сообщество долгое время верило, что Яндекс не решится на дальнейшую войну и, скорее всего, вернёт все сайты в индекс, тем более, что под АГС в первое время попадали и явные СДЛ сайты (у меня таких было 2 под фильтром).

Симптомы АГС на сайте:

• Резкое снижение числа проиндексированных страниц поисковой системой Яндекс;

• Резкое падение трафика со стороны Яндекса;

• Ошибка при добавлении новой страницы в «аддурилку»;

Вот собственно и всё. Факторов мало, зато проблем для головы веб-мастера очень много!

Многие оптимизаторы заявляют, что главной причиной попадания под АГС является продажа ссылок в Sape или подобных биржах. Между тем, причин больше: некачественный контент на сайте (генерация программами, копипаст, большое количество грамматических ошибок, неправильное структурирование текста), большое количество дублей страниц (метки, архивы, страницы-копии с комментариями) и переоптимизированные под запросы страницы.

«Робот анализирует содержание всех страниц сайта и принимает решение о включении их в индекс. Какое количество страниц будет проиндексировано — зависит от многих факторов, в том числе от качества контента, интереса пользователей к ресурсу и соответствия сайта поисковой лицензии», — так прокомментировали работу АГС сами разработчики.

Несмотря на все надежды, Яндекс дорабатывает свой алгоритм и вслед за АГС-17 выходит АГС-30, который имеет все самые лучшие качества своего «младшего брата» и более обученный «ум». Опять же имя было заимствовано у пулемёта.

В настоящее время от АГС пострадало огромное количество сайтов (сателлитов, конечно же), что позволило Яндексу значительно улучшить качество поисковой выдачи и опередить Google в доле поискового рынка в Рунете. Конечно же, фильтр первое время не щадил и полноценные СДЛ ресурсы, но свою задачу на данный момент он выполняет: чистка Рунета от поискового мусора, которому нет места в выдаче.

На этом всё.

Спасибо Михаилу за отличную идею для поста, а уже в следующий раз попытаюсь научить вас бороться с этим самым АГС-30 и в первую очередь делать профилактику такого неприятного «заболевания» как фильтр от Яндекса (тем более, что за последний год я сумел вывести из под АГС порядка 3-4 сайтов).

До встречи на моём блоге тоже!