Не так давно Яндекс поменял алгоритмы определения полезных и бесполезных сайтов. Все малополезные сайты, на его взгляд, он отмечает фатальной ошибкой.
Сообщение об ошибки выглядит так:
Сайт может угрожать безопасности пользователя, или на нём были обнаружены нарушения правил поисковой системы. Наличие этой проблемы негативно сказывается на положении сайта в результатах поиска.
При переходе подробнее можно увидеть следующее:
Всё это звучит как приговор и радоваться не приходится:
Понять в чем же причина довольно сложно, потому что ошибка имеет общий вид и вбирает в себя всевозможные специальные и случайные нарушения.
От Яндекса есть ссылки на инструкцию, что делать. Там общие черты и всевозможные причины:
Малополезный контент
Некачественные сайты
Бессмысленно писать в Яндекс поддержку. Они отвечают, но типовыми сообщениями. А когда ты всё же добиваешься человеческого ответа, то он не обнадеживает и нередко звучит следующим образом (своими словами пересказ слов поддержки):
Всё это хорошо, но иногда это полнейшая чушь и вот почему. Вы можете хоть тысячу полезных страниц создать для сайта, но если он имеет технические недочеты, всё это это будет насмарку. Потому что, если сайт нормальный и не создан для спама, причина может быть в технических проблемах сайта. Но ответят они вам так, что вы не поймёте. Так что лучше сосредоточится на технических моментах, которые нередко возникают по вине движка и тщательно перепроверить свой сайт.
Потом смотрим файл.htaccess, там не должно быть на другие сайты.
В том числе надо избегать любых мобильных редиректов, в том числе и на свои сайты. Яндекс может за такой редирект понизить в выдаче, влепив фатальную ошибку, приняв его за вредоносный скрипт.
Проверьте плагины кэширования. Например, плагин кэширования на одном из моих сайтов внёс в файл .htaccess следующую мобильную переадресацию:
RewriteCond %{HTTP_USER_AGENT} ^.*(\bCrMo\b|CriOS|Android.*Chrome\/[.0-9]*\s(Mobile)?
|\bDolfin\b|Opera.*Mini|Opera.*Mobi|Android.*Opera|Mobile.*OPR\/+|Coast\/+|Skyfire|Mobile\sSafari\/[.0-9]*\sEdge|IEMobile|MSIEMobile|fennec|firefox.*maemo|
(Mobile|Tablet).*Firefox|Firefox.*Mobile|FxiOS|bolt|teashark|Blazer|Version.*Mobile.*Safari|
Safari.*Mobile|MobileSafari|Tizen|UC.*Browser|UCWEB|baiduboxapp|baidubrowser|
DiigoBrowser|Puffin|\bMercury\b|Obigo|NF-Browser|NokiaBrowser|OviBrowser|OneBrowser|TwonkyBeamBrowser|SEMC.*Browser|
FlyFlow|Minimo|NetFront|Novarra-Vision|MQQBrowser|MicroMessenger|
Android.*PaleMoon|Mobile.*PaleMoon|Android|blackberry|
\bBB10\b|rim\stablet\sos|PalmOS|avantgo|blazer|elaine|
hiptop|palm|plucker|xiino|Symbian|SymbOS|Series60|
Series40|SYB-+|\bS60\b|Windows\sCE.*(PPC|Smartphone|Mobile
|{3}x{3})|Window\sMobile|Windows\sPhone\s+|WCE;|Windows\sPhone\s10.0|Windows\sPhone\s8.1|
Windows\sPhone\s8.0|Windows\sPhone\sOS|XBLWP7|
ZuneWP7|Windows\sNT\s6\.\;\sARM\;|\biPhone.*Mobile|\biPod|\biPad|
Apple-iPhone7C2|MeeGo|Maemo|J2ME\/|\bMIDP\b|\bCLDC\b|webOS|
hpwOS|\bBada\b|BREW).*$
Такая штука может не понравиться Яндексу. Лучше этого избегать.
Если ошибок на сайте не видно, переадресаций и вирусов нет, следует обратить внимание на количество рекламы. Возможно Яндексу не нравится, что несколько рекламных блоков видны на одном пространстве экрана монитора. Следует уменьшить часть рекламных блоков.
Это чуть ли не основная причина большинства проблем. Очень важно запретить все лишние страницы на сайте. Для этого делаем .
После того как всё исправили. Из того, что казалось, нужно исправить, отправляем сайт на проверку. И ждём месяц в надежде, что это было недоразумение.
Можно даже обойтись без этой кнопки. Если конкретно те ошибки, из-за которых Яндекс поставил бан исправлены, сайт может вылезти из-под санкций чуть ли не через несколько дней после исправления.
Примерно год назад(или больше) Яндекс сделал в Вебмастере Яндекса возможность узнавать применены ли санкции к вашему сайту или нет.
И вот прошёл год.
Сегодня я расскажу какие из этих «санкционных» сигналов работают, а какие не работают.
Выглядит это примерно так:
Сами санкции имеют 4 вида: Фатальные проблемы, Критические проблемы, Возможные проблемы, Рекомендации.
Фатальные проблемы это по сути бан сайта. Обычно это что то очень серьёзное. Например бан за покупку ссылок, накрутку ПФ, Спамный текст,..
Если у вас есть фатальная проблема в Вебмастере, то обычно сайт или полностью удаляется из индекса Яндека или же траф становится практически нулевым.
На самом деле фатальные проблемы встречаются очень редко. Я всего один раз видел такое. Был у одного человека бан за Минусинск.
Разумеется если вы видите фатальные проблемы на сайте, то нужно срочно их исправлять.
Критические проблемы это в основном какие то технические проблемы у сайта. Пример таких проблем: Вирус на сайте, Сайт выдаёт 404 ошибку, Долго грузится сайт,..
Вот пример самой распространенной проблемы: Долгий ответ сервера.
Cреднее время ответа роботу всех страниц вашего сайта превышает 3 секунды. Проблема могла возникнуть из-за долгого ответа, возвращаемого сервером при обращении поискового робота к некоторым страницам сайта. Если в настоящий момент сервер отвечает быстро, по мере переобхода сайта роботом Яндекса проблема перестанет быть актуальной, и сообщение об ошибке пропадет.
По факту могу сказать, что если у вас на сайте есть Критическая проблема , то трафик у вашего сайта снизится. Сайт будет в индексе Яндекса, но траф сильно просядет.
После того вы исправите проблему трафик восстановится, но НЕ ПОЛНОСТЬЮ.
Да, кстати это интересная вещь от Яндекса — если сайт наложены санкции, но потом сайт вышел из под санкций, то траф окончательно не восстанавливается Почему непонятно. Поговаривают, что такое вот наказание и чтобы больше не нарушал.
Возможные проблемы это самые распространенные проблемы. На самом деле половина(или больше) из этих проблем не являются проблемами.
Ну посудите сами, вот эти проблемы: Отсутствует robots,txt, Не прописан в роботсе Host, Отсутствует диспришн,..
Причём зачастую влияние многих этих проблем совершенно разное. Об этом мы и поговорим более подробно.
Отсутствует robots,txt, Не прописан в роботсе Host — как не странно, но Яндекс считает, что эта проблема существенная. Снижается трафик на сайте.
Лично для меня это понятно, так как много сайтов вообще не имеют на своём сайте robots.txt и прекрасно существуют.
Отсутствуют мета-теги
Но что касается Вебмастера Яндекса, факт того что диспришны у вашего сайта отсутствуют не влечёт к каким то санкциям со стороны Яндекса.
Нет используемых роботом файлов Sitemap.
По сути нет карты сайта. Не обращайте на это внимание, никаких санкций на это не накладывается.
В целом обычно у владельцев сайтов далёких от Seo, вот такая ситуация в Вебмастере:
Но скажу, честно им на это похиру.
Начнём с моего блога(сайт):
Нетрудно понять, что моему блогу не нужен никакой физический адрес в Питере.
«Сайт не Оптимизирован для мобильных устройств».
Это на самом деле НЕ пожелание, а именно критическая или даже Фатальная проблема. Дело в том, что если сайт у вас криво отображается для «мобильных» пользователей, то Поведенческие факторы у сайта будут очень низкие.
Поэтому если у вас в Вебмастере высвечивается такая проблема, то срочно её исправляйте.
И в конце выскажу своё мнение о работе Вебмастера Яндекса:
Всё очень и очень «мутно». Нет главного сигнала — «Поведенческие факторы». Можно было сделать такой сигнал, и если у вашего сайта плохие ПФ, то можно отображать эту опцию и прописывать — Улучшайте ваш сайт.
А так практически все сигналы не являются проблемными.
Ну зачем публиковать, что у сайта нет роботса, хоста в роботсе и карты сайта, когда по сути это не играет никакой роли для сайта?! Или может пользователь сайта так и мечтает заглянуть в Роботс?!
Нужен сигнал: Переспам текста и Индикатор Поведенческих факторов.
Пишите свои пожелания какие санкционные сигналы вы хотели бы видеть в Яндекс.Вебмастере. Я этот список постараюсь передать Яндексу.
Добрый день уважаемые читатели блога сайт, открываю я сегодня веб кабинет Яндекса и обнаруживаю на против двух своих сайтов, восклицательный знак, зайдя в первый сайт я увидел фатальную ошибку с вот таким содержимым: "Сайт может угрожать безопасности пользователя, или на нём были обнаружены нарушения правил поисковой системы. Наличие этой проблемы негативно сказывается на положении сайта в результатах поиска ." Давайте смотреть в чем причина и каким образом вы сможете это исправить.
И так есть пациент, мой один из блогов (http://москва-россия.рф/) на нем я делюсь своим опытом проживания в Москве, где и куда там пойти и что и где посмотреть, если вы его еще не видели, то милости прошу. Захожу я в webmaster кабинет и вижу как и писал выше, предупреждение.
Зайдя в настройки самого сайта, я увидел следующую картину: 1 фатальная ошибка, щелкаем по ней, чтобы посмотреть детали.
В июле поступил на продвижение новый сайт, созданный на вордпресс. Пока делался аудит сайта, проиндексированные страницы все были исключены из поиска Яндекс. Почему? Ответ нашла в панели яндекс вебмастер. Смотрите на восклицательный знак в красном треугольнике.
Как оказалось, была одна фатальная ошибка, которая и стала причиной исключения сайта целиком из поиска. Сайт показался Яндексу дорвеем.
Проблема оказалась в том, что Яндекс посчитал сайт дорвеем. Почему? Ведь никаких внешних ссылок на сайте не было. Загружались страницы, которые и должны были загружаться.
Оказывается, Яндекс считает сайт дорвеем не только тогда, когда он перенаправляет на другие сайта. Но и тогда, когда внутри самого сайта оказывается слишком много редиректов. Откуда могли взяться редиректы? Ответ так же нашелся в панели яндекс вебмастер.
Как оказалось, вордпресс генерит дубли страниц, и перенаправляет с них на страницы с ЧПУ
После исправления ошибок, это будет отдельный пост, была нажата кнопка Я ВСЕ ИСПРАВИЛ. Нажимать повторно эту кнопку можно только через 30 дней. Поэтому советую тщательно проверить ваш сайт, который посчитали дорвеем, исправить все ошибки и только после этого можно смело отправлять ресурс на проверку.
10 августа в панели вебмастера появилась информация, что фатальных ошибок нет. Т.е. сайт перестал считаться дорвеем.
Ну и приятный бонус — сайт появился в поиске по некоторым запросам.
