Сразу после окончания празднования российского «Дня народного единства» с 4 по 6 ноября 2022 г. клиентские сайты в Дмитрове стали рапортовать о невозможности запуска рекламных кампаний «Яндекс Директ».
7 ноября 2022 г. стал «Днем ноябрьской революции в России» для российской поисковой системы
Общение с технической поддержкой закончилось тем, что «робот Яндекс не может получить доступ к сайту». Однако сам сайт беспроблемно открывался как с мобильных, так и с десктопных устройств на протяжении всего времени переписки.
Сообщить с какого IP-адреса происходит обращение к сайту в Дмитрове со стороны робота Яндекс, техническая поддержка отказалась, сославшись на недостаток информации. Когда сомнения стали очевидными, мы спросили прямо — может ли робот Яндекс соединяться с клиентским сайтом не из России? Ответ был отрицательным.
Клиентская поддержка предложила направить им лог-файл с обращениями к сайту. Что мы и сделали, однако никакого ответа со стороны Яндекс не последовало.
Ошибку 403 получали все роботы Яндекс, как основные, так и вспомогательные:
- Основной робот Яндекса Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots);
- Робот-зеркальщик Mozilla/5.0 (compatible; YandexBot/3.0; MirrorDetector; +http://yandex.com/bots);
- Робот Яндекс Картинок Mozilla/5.0 (compatible; YandexImages/3.0; +http://yandex.com/bots);
- Робот Яндекс Видео Mozilla/5.0 (compatible; YandexVideo/3.0; +http://yandex.com/bots);
- Робот Яндекс Вебмастера Mozilla/5.0 (compatible; YandexWebmaster/2.0; +http://yandex.com/bots);
- Индексатор мультимедийных данных Mozilla/5.0 (compatible; YandexMedia/3.0; +http://yandex.com/bots);
- Робот Поиска по блогам Mozilla/5.0 (compatible; YandexBlogs/0.99; robot; +http://yandex.com/bots);
- Робот Яндекс Директа Mozilla/5.0 (compatible; YandexDirect/3.0; +http://yandex.com/bots).
После непродолжительных изучений access.log и нехитрых манипуляций с Cloudflare мы выяснили — все роботы Яндекс пингуют сайт из Германии!!! И вроде бы, даже ничего страшного, но зачем скрывать эту информацию от пользователей и вводить в заблуждение клиентов «Яндекс Директ» — непонятно.
Время ответа сервера, расположенного в московском ДЦ для роботов Яндекс выросло в среднем с 300 до 750 мс. И здесь появляются новые вопросы об оценке быстродействия работы сайта в Дмитрове с точки зрения пресловутых «показателей качества» Яндекс.
Немецкие IP-адреса для российской поисковой машины — это конечно прецедент. Что это — миграция интеллектуальных разработок Яндекс из России?
Ошибка 403 говорит о том, что доступ к запрашиваемой странице запрещён или у пользователя нет прав на просмотр контента.
