Mozilla/5.0 (compatible; Linux x86_64; Mail.RU_Bot/Favicons/2.0; +https://help.mail.ru/webmaster/indexing/robots)
Вот подробный разбор User-Agent строки `Mozilla/5.0 (compatible; Linux x86_64; Mail.RU_Bot/Favicons/2.0; +https://help.mail.ru/webmaster/indexing/robots)` в виде списка на русском языке: --- 1. **Mozilla/5.0** - **Историческая маскировка** для совместимости. - **Не означает Firefox** — стандарт для всех ботов. 2. **(compatible; Linux x86_64; Mail.RU_Bot/Favicons/2.0; +https://help.mail.ru/webmaster/indexing/robots)** - **compatible** — «совместим с Mozilla». - **Linux x86_64** — **серверная платформа** (64-битный Linux, Intel/AMD). - **Mail.RU_Bot/Favicons/2.0** — **официальный бот Mail.ru** для **сбора фавиконок**. - **+https://...** — **обязательная ссылка** на документацию (по стандарту robots.txt). - Ссылка ведёт на **официальную страницу Mail.ru для вебмастеров**. 3. **Нет WebKit / Chrome / Gecko** - **Не браузер** — это **автоматизированный робот**. - **Простая структура** — типично для легитимных ботов. --- ### Итоговая расшифровка: | Параметр | Значение | |------------------------|---------| | **Агент** | **Mail.RU_Bot/Favicons/2.0** | | **Тип** | **Поисковый бот для фавиконок** | | **Владелец** | **Mail.ru (VK Group)** | | **Назначение** | **Сбор иконок сайтов (favicon.ico, apple-touch-icon и др.)** | | **Платформа** | **Linux x86_64 (сервер)** | | **Документация** | `https://help.mail.ru/webmaster/indexing/robots` | | **Маскировка** | **Минимальная** (Mozilla/5.0 + compatible) | | **Статус** | **100% легитимен** | --- ### Что делает **Mail.RU_Bot/Favicons**? - **Сканирует сайты на наличие фавиконок**: - `/favicon.ico` - `/apple-touch-icon.png` - `` в HTML - **Используется в**: - Поиске Mail.ru - Яндекс.Браузере (через Mail.ru) - Почте Mail.ru - Других сервисах VK Group - **Работает с 2010-х**, версия **2.0** — актуальна с 2020 года. - **Не индексирует контент** — только иконки. --- ### Технические особенности: | Характеристика | Значение | |---------------|---------| | **IP-адреса** | Из России: `94.100.*`, `217.69.*`, `5.61.*` (AS47764 — Mail.ru) | | **PTR-записи** | `*.mail.ru`, `*.bot.mail.ru` | | **Заголовки** | `Accept: image/*`, `User-Agent` как выше | | **HTTP-метод** | **GET** (только иконки) | | **Частота** | **1–5 запросов/день** (низкая нагрузка) | | **JavaScript** | **Не выполняет** | --- ### Это **официальный бот Mail.ru** — **не блокировать!** | Признак легитимности | ✅ | |---------------------|----| | Официальная документация Mail.ru | ✅ | | Указана ссылка `+https://...` | ✅ | | Используется в поиске Mail.ru | ✅ | | IP из диапазона Mail.ru | ✅ | > **Блокировка = потеря фавиконки в поиске Mail.ru и Яндекс.Браузере!** --- ### Пример реального запроса: ``` GET /favicon.ico HTTP/1.1 Host: example.com User-Agent: Mozilla/5.0 (compatible; Linux x86_64; Mail.RU_Bot/Favicons/2.0; +https://help.mail.ru/webmaster/indexing/robots) Accept: image/x-icon,image/png Connection: close ``` --- ### Рекомендации | Действие | Обоснование | |--------|------------| | **Разрешить полностью** | Легитимен, низкая нагрузка | | **Добавить в robots.txt** | Для порядка | | **Кешировать favicon.ico** | Ускорит ответ (304 Not Modified) | | **Исключить из аналитики** | Не пользователь | | **Не блокировать по IP/UA** | Официальный бот | --- ### Пример `robots.txt` для Mail.RU_Bot: ```txt User-agent: Mail.RU_Bot/Favicons Allow: /favicon.ico Allow: /apple-touch-icon*.png User-agent: * Disallow: /admin/ ``` --- ### Как отличить от подделки? | Признак | Настоящий | Подделка | |--------|----------|---------| | **IP** | Диапазоны Mail.ru | Любой другой | | **PTR** | `*.mail.ru` | Нет | | **Ссылка в UA** | Точная `+https://help.mail.ru/...` | С ошибками | | **Запросы** | Только `/favicon.ico`, иконки | Любые страницы | --- ### Вывод: - **Это официальный бот Mail.ru для сбора фавиконок** - **Версия 2.0 (с 2020 года)** - **100% легитимен — разрешать и кешировать!** - **Не нагружает сервер** - **Полезен для SEO (отображение иконки в поиске)** - **Исключать из статистики посещений**