Mozilla/5.0 (compatible; DotBot/1.2; +https://opensiteexplorer.org/dotbot; help@moz.com)

DotBot 1.2 — краулер SEO-сервиса Moz. Такие клиенты собирают данные о страницах и ссылках для аналитики сервиса.

Краулеры SEO-сервисов, такие как DotBot 1.2 от Moz, обычно запускаются для анализа страниц и ссылок в целях оптимизации поискового ранжирования. Они посещают сайты для сбора данных, необходимых для аналитики сервиса.

Bot Guard видел этот User-Agent на 39 сайтах из 54 подключённых (72%). Первое появление в нашей статистике: 29.09.2023, последнее: 16.10.2026. Всего за это время зафиксировано 949 798 визитов. В среднем это около 853 визитов в день за 1114 дней наблюдений.

По строке определяется: название клиента — DotBot версии 1.2. Часть токенов, например Mozilla/5.0, исторически есть почти у всех браузеров и ничего не говорят о реальном клиенте.

Вердикт: краулер или служебный бот. Основания: явных противоречий в строке нет; с 01.10.2026 защита Bot Guard сработала на этот User-Agent 6 003 раза на 4 сайтах (User-Agent из списка нежелательных ботов: 5 961; ротация IP (прокси-пул): 39; аномальная частота запросов: 3); запросы шли из сетей: Wowrack (2 099); в статистике 39 сайтов, 949 798 визитов. Это оценка по строке и поведению, а не доказательство: по одному User-Agent нельзя гарантировать, что за ним бот или человек.

Краулер SEO-сервиса обходит много страниц подряд и создаёт нагрузку без пользы для сайта: посетителей он не приводит. Его визиты видны в журнале сервера и могут искажать серверную статистику, если её не фильтровать.

Бот SEO-сервиса Moz описан в документации сервиса, и его запросы можно сверить по IP-адресам, если сервис их публикует. Строку User-Agent подделывают часто: под популярных SEO-ботов маскируются парсеры и сканеры.

Запросы этого клиента легко найти в журнале по подстроке «DotBot». Ниже примеры для подсчёта обращений, для nginx и для PHP. Строку лучше сверять без учёта регистра.

# сколько запросов в журнале nginx
grep -i "DotBot" /var/log/nginx/access.log | wc -l

# nginx: пометить запросы клиента
map $http_user_agent $is_client {
    default 0;
    ~*DotBot 1;
}

// PHP: определить клиента
if (stripos($_SERVER['HTTP_USER_AGENT'] ?? '', 'DotBot') !== false) {
    // ваша логика: пропустить, ограничить или заблокировать
}

Робот, соблюдающий правила, читает robots.txt до обхода страниц. Чтобы закрыть сайт целиком или только один раздел, добавьте правило с названием клиента. robots.txt рекомендательный: подделки и недобросовестные боты его игнорируют, для них нужна блокировка на сервере.

# закрыть весь сайт
User-agent: DotBot
Disallow: /

# закрыть только раздел
User-agent: DotBot
Disallow: /private/

# разрешить всё
User-agent: DotBot
Allow: /

Этот бот создаёт нагрузку, но не приносит трафика. Если вам не нужен анализ сайта этим сервисом, закройте его правилом в robots.txt. При высокой нагрузке или игнорировании robots.txt блокируйте по IP.