Mozilla/5.0 (compatible; YaDirectFetcher/1.0; +http://yandex.com/bots) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/108.0.0.0
YaDirectFetcher/1.0 - это официальный краулер рекламной системы Яндекс.Директ. Он используется для проверки и индексации целевых страниц рекламных объявлений. Бот имитирует браузер Google Chrome 108 на платформе AppleWebKit, чтобы корректно обрабатывать современные веб-страницы. Разработан компанией Яндекс.
YaDirectFetcher - легитимный бот Яндекса. Уровень доверия высокий. Риски минимальны, однако рекомендуется проверять обратный DNS-запрос, чтобы исключить подделку. Злоумышленники могут маскироваться под этого бота для сканирования уязвимостей.
Идентифицируйте по строке YaDirectFetcher/1.0 в User-Agent. На сервере можно разрешить доступ через robots.txt или настроить веб-сервер (Nginx/Apache) на белый список IP-диапазонов Яндекса. В коде (PHP, Python) проверяйте наличие подстроки YaDirectFetcher.