«Яндекс» продолжает искать, но почти перестал обходить интернет

«Яндекс» продолжает искать, но, похоже, почти перестал замечать изменения в интернете. После аварий в трех дата-центрах компании резко сократилась активность YandexBot, который собирает информацию для поисковой выдачи. Сам поиск работает, однако насколько быстро в нем появляются новые страницы и обновляются уже известные, пока неизвестно.
По данным Cloudflare Radar, после 8 октября автоматизированный трафик из сети «Яндекса» обрушился более чем на 90%, а к 11 октября в отдельные часы практически исчез. Речь идет о запросах к сайтам, использующим инфраструктуру Cloudflare, поэтому масштаб проблемы явно выходит за пределы одного ресурса.
Похожую картину фиксирует IT-World. До аварий YandexBot ежедневно обращался к нашему сайту тысячи раз, но затем его активность сократилась более чем на 99%. При этом Googlebot продолжал обходить сайт в обычном режиме. К 13 октября обращения YandexBot начали возобновляться, однако их количество оставалось значительно ниже прежнего уровня.
Резкое сокращение активности поисковых роботов совпало с серией аварий в дата-центрах «Яндекса». 8 октября после пожара остановилась площадка в Сасово Рязанской области, 9 октября пострадала инфраструктура в Калужской области, а 11 октября полностью прекратил работу ЦОД во Владимирской области. Как ранее сообщал IT-World, после третьей аварии «Яндекс» перевел облачную платформу в аварийный режим. Из-за нехватки свободных мощностей компания ограничила выделение вычислительных ресурсов, а для переноса клиентских систем подключились конкуренты.
До сих пор не работают и «Яндекс Вебмастер» с «Яндекс Метрикой». На странице Вебмастера компания прямо связывает недоступность сервиса с проблемами в дата-центрах, но сроков восстановления не называет. Владельцы сайтов лишились возможности проверить состояние индексации, ошибки обхода и актуальную статистику посещений.
Сам поиск продолжает работать, однако резкое сокращение активности роботов вызывает вопросы к актуальности выдачи. Новые публикации могут попадать в нее с задержкой, а изменения цен и наличия товаров учитываться не сразу. Подтвержденных данных о таких задержках пока нет. «Яндекс» не объяснял, затронули ли аварии поисковую инфраструктуру и почему роботы почти перестали посещать сайты.
К 13 октября активность YandexBot начала восстанавливаться, но до прежнего уровня еще далеко. «Яндекс» не объяснил причины резкого сокращения обхода сайтов и не сообщил, повлияло ли оно на обновление поискового индекса. Пока пользователи получают привычную выдачу, остается неизвестным, насколько своевременно в нее попадает новая информация.
