Mozilla/5.0 (compatible; YandexTurbo/1.0; +http://yandex.com/bots)
YandexTurbo - это официальный краулер Яндекса, предназначенный для загрузки страниц с целью их преобразования в формат «Турбо-страниц». Данный бот сканирует контент сайта, чтобы затем отображать его в мобильной выдаче Яндекса в ускоренном, сжатом виде. Создан компанией Яндекс для улучшения пользовательского опыта на мобильных устройствах с медленным интернетом.
Данный User-Agent является официальным ботом Яндекса. Уровень доверия - высокий. Риски связаны в основном с возможным повышением нагрузки на сервер при частом сканировании. Рекомендуется не блокировать его, если вы используете Турбо-страницы, однако следует настроить корректную обработку в robots.txt для контроля частоты обхода.
Идентифицировать YandexTurbo можно по наличию строки 'YandexTurbo/1.0' в User-Agent. В коде сервера (на PHP, Python, Nginx) можно проверять User-Agent на совпадение с регулярным выражением /YandexTurbo/i. Для разрешения или ограничения доступа используйте директивы в robots.txt (например, User-agent: YandexTurbo) или настройки .htaccess / Nginx.