Как конкуренты могут понизить позиции сайта или удалить страницы из выдачи?
Как избежать пессимизации?
Разберемся с вопросом доступности сайта далее.
Проблематика: Google будет удалять из выдачи страницы, у которых проблемы с доступностью
Если страницы сайта недоступны на протяжении многих часов, то Google начнет процедуру деиндексации. Информацию подтвердил сотрудник поиска Google Джон Мюллер:
В зависимости от того, как это происходит, мы можем начать деиндексацию URL через пару дней. Это происходит на постраничной основе. При этом, когда сайт снова станет доступен, часто мы так же быстро можем всё вернуть.
Уязвимость могут эксплуатировать конкуренты по выдаче. Если нарушить стабильную работу сайта, страницы будут удалены. Сбой сайта достигается путем запроса большого объема данных с сайта, что приводит к повышенной нагрузке на сервер.

В Google есть специальный инструмент для удаления неактуальных страниц. Инструмент могут использовать сторонние пользователи в отношении любых сайтов, подтверждение прав на сайт не требуется.
Ссылка на сервис — Remove outdated content.
Итак, схема следующая:
- Делаешь конкурентный сайт недоступным для поискового робота;
- Подаешь запрос на удаление страниц из поисковой выдачи.
В результате:
- Если сайт перестанет открываться, то будет удален из поисковой выдачи;
- Если у сайта появляются проблемы с доступностью, сайт замедляется. Уменьшается краулинговый бюджет сайт. Рекомендованный материал в блоге MegaIndex по ссылке далее — Что такое краулинговый бюджет сайта и как его оптимизировать.
Влияет ли доступность сайта на ранжирование в выдаче? Нет пока. Но не исключается, что в перечень дополнительных факторов будет входить и доступность сайта. Аналитик в веб из Google, в оригинале:
Depending on how it goes down, we can start dropping URLs after a couple of days. This happens on a per-URL basis. Also, when it comes back, often we can catch up quickly again t.
Небольшое время бесперебойной работы сайта и частые проблемы с доступностью сайта являются признаками каких-либо неполадок, которые нельзя оставлять без внимания.
В лучшем случае причиной могут служить профилактические работы у хостинг-провайдера, но если веб не получал никаких уведомлений, то не исключена поломка оборудования или атака на сайт, которые могут привести к более значимым последствиям.
Что делать для избежания проблем? Разберемся с вопросом далее.
Решение: Мониторинг для проверки доступности
Как проверить доступность сайта? Есть разные варианты. Например, можно анализировать нагрузку через различные серверные инструменты, такие как серверная версия фаервола.
Еще доступность можно проверять через специальные сервисы. Суть в следующем:
- Робот направляет запросы;
- Анализирует ответы;
- При возникновении проблем оповещает владельца профиля о проблемах.

К примеру, можно использовать сервис от MegaIndex.
Ссылка на сервис — Проверка доступности сайта.
Стоимость 1 проверки составляет 0.01 рублей. Списания проходят раз в сутки.
Если сервер сайта перестанет работать, система уведомит об инциденты любым удобным способом и можно будет оперативно возобновить работу сайта не потеряв посетителей и позиций в поисковых системах.
При достижении нулевого баланса проверка прекращается.
Пример отчета:

Что делать в случае возникновения проблем? Когда сервис оповещает о проблемах, порядок действий следующий:
- Настроить код ответа сервера 503 для недоступных страниц или всего сайта. Код ответа 503 указывает на то, что сайт временно не обрабатывает запросы по техническим причинам. Данный код ответа следует использовать не более нескольких часов. Так позиции сайта не будут потеряны;
- Решить проблему с доступностью сайта. Перечень действий зависит от нюансов проблематики. Если речь про ДДоС (denial-of-service attack), то включить временно защиту через CloudFlare или подобные сервисы;
- После решение проблемы, восстановить стабильную работу сайта.

Выводы
Раскрутка в поисковых системах становится все более интересной. Теперь сайт следует делать адаптивным, быстрым и так далее. Так и доступность сайта связана с позициями в поисковой выдаче.
Какие могут быть проблемы из-за доступности сайта? Страницы сайта могут быть удалены из выдачи.
Деиндексаця происходит постранично. После восстановления работы страницы могут вернуться в поисковую выдачу, но не быстро. Поведенческие факторы страницы будут обнулены, поэтому возврат позиций не гарантирован.

Следует предпринять ряд превентивных мер, чтобы никаких проблем не было. Полный список действий описан выше.
Правильным будет настроить проверку доступности сайта через любой удобный и доступный сервис. Например, в MegaIndex цена за проверку минимальная — всего1 копейка.
Ссылка на сервис — Проверка доступности сайта.
Доступность сайта проверяется круглосуточно. При обнаружении проблем, система автоматически производит еще несколько проверок и отправляет оповещения, согласно указанным настройкам.
Есть ли вопросы? Используете ли мониторинг доступности страниц сайта? Напишите свое мнение в комментариях.
Обсуждение
http://jkeks.ru/jkeks.ru/archives/20072
Ну это как вариант.