Mozilla/5.0 (compatible; Amazonbot/0.1; +https://developer.amazon.com/support/amazonbot)

Amazonbot 0.1 — краулер ИИ-сервиса Amazon. Такие клиенты обычно собирают тексты страниц для обучения моделей или для ответов пользователям.

Клиенты такого типа обычно запускаются ИИ-сервисами для сбора текстов страниц, которые затем используются для обучения моделей или для ответов пользователям. Владелец Amazon обычно запускает такие краулеры для выполнения этих задач.

Bot Guard видел этот User-Agent на 4 сайтах из 53 подключённых (8%). Первое появление в нашей статистике: 02.06.2026, последнее: 08.10.2026. Всего за это время зафиксировано 438 визитов. В среднем это около 3 визитов в день за 129 дней наблюдений.

По строке определяется: название клиента — Amazonbot версии 0.1. Часть токенов, например Mozilla/5.0, исторически есть почти у всех браузеров и ничего не говорят о реальном клиенте.

Вердикт: краулер или служебный бот. Основания: явных противоречий в строке нет; с 01.10.2026 защита Bot Guard сработала на этот User-Agent 113 раз на 5 сайтах (подделка под поискового бота (rDNS не подтвердил владельца): 61; подделка под ИИ-бота (rDNS не подтвердил владельца): 52); запросы шли из сетей: Google Cloud (113); в статистике 4 сайтов, 438 визитов. Это оценка по строке и поведению, а не доказательство: по одному User-Agent нельзя гарантировать, что за ним бот или человек.

Такой краулер собирает контент для ИИ-сервиса. Прямого трафика он не даёт, зато увеличивает число запросов в журнале и может создавать нагрузку при частом обходе. Решение разрешить или запретить его принимается политикой сайта.

Настоящий ИИ-краулер приходит с адресов своей компании и учитывает правила robots.txt. Если запросы идут с обычного хостинга и не запрашивают robots.txt, это, скорее всего, подделка под Amazonbot.

Запросы этого клиента легко найти в журнале по подстроке «Amazonbot». Ниже примеры для подсчёта обращений, для nginx и для PHP. Строку лучше сверять без учёта регистра.

# сколько запросов в журнале nginx
grep -i "Amazonbot" /var/log/nginx/access.log | wc -l

# nginx: пометить запросы клиента
map $http_user_agent $is_client {
    default 0;
    ~*Amazonbot 1;
}

// PHP: определить клиента
if (stripos($_SERVER['HTTP_USER_AGENT'] ?? '', 'Amazonbot') !== false) {
    // ваша логика: пропустить, ограничить или заблокировать
}

Робот, соблюдающий правила, читает robots.txt до обхода страниц. Чтобы закрыть сайт целиком или только один раздел, добавьте правило с названием клиента. robots.txt рекомендательный: подделки и недобросовестные боты его игнорируют, для них нужна блокировка на сервере.

# закрыть весь сайт
User-agent: Amazonbot
Disallow: /

# закрыть только раздел
User-agent: Amazonbot
Disallow: /private/

# разрешить всё
User-agent: Amazonbot
Allow: /

Хотите, чтобы ваш контент попадал в ответы ИИ, оставьте доступ для Amazonbot. Если нет, закройте его правилом в robots.txt. Запросы с адресов вне сетей компании Amazon можно блокировать как подделку.