Бот PravomerBot
Страница для администраторов сайтов: что делает наш бот, как его узнать и как отказаться от обхода.
Что делает
- Открывает только публичные страницы методом GET: главную, политику, оферту, контакты, формы - не более 12 страниц за проверку.
- Проверка по запросу пользователя сервиса или в рамках нашего обзора открытых сайтов организаций - не чаще одного раза в месяц на сайт.
- Не авторизуется, не сканирует порты, не ищет уязвимости, не отправляет формы, не собирает контакты людей.
- Соблюдает robots.txt (директивы для
PravomerBotи*), Crawl-delay и паузу между запросами не менее 1,5 секунды.
Как узнать
User-Agent: PravomerBot/0.1 (+https://pravomer.zaratorussia.ru.net/bot). Запросы идут с серверов в России; актуальные адреса сообщим по запросу на bot@pravomer.example.
Как запретить
User-agent: PravomerBot
Disallow: /Или напишите на bot@pravomer.example - внесём домен в список исключений в течение одного рабочего дня.
Подтверждение владения доменом
Для получения подробного отчёта владелец размещает TXT-запись вида pravomer-verify=<код> или файл /.well-known/pravomer-verify.txt. Проверка такой записи выполняется этим же ботом.