О сканере SaitRadarBot
Если в логах вашего сайта появился запрос с таким User-Agent - это мы, СайтРадар. Ниже - что именно делает бот и как убедиться, что это действительно мы, а не кто-то другой.
User-Agent
SaitRadarBot/1.0 (+https://saitradar.ru/bot)
Что делает бот
Бот запускается, когда владелец сайта (или посетитель СайтРадара) отправляет ваш адрес на бесплатную проверку. Он открывает главную страницу, robots.txt, sitemap.xml и несколько связанных страниц (политику конфиденциальности, контакты) - не больше десяти страниц за один проход.
Чего бот не делает
- Не перебирает пароли и скрытые пути, не пытается ничего взломать.
- Не отправляет формы и не совершает никаких действий на сайте - только читает то, что сайт публикует.
- Не сохраняет ваши данные для чего-либо, кроме показа результата проверки инициатору скана.
Другими словами - бот делает ровно то же самое, что обычный браузер посетителя: открывает страницы, которые сайт сам показывает всем.
robots.txt
Для главной страницы и стартового набора документов (политика/контакты) бот всегда заходит без дополнительных запросов - это нужно, чтобы честно оценить сам сайт, а не только то, что открыто явно. Для всех остальных страниц бот уважает правила вашего robots.txt.
Хотите ограничить или связаться с нами
Если вы хотите, чтобы бот не заходил на ваш сайт, добавьте правило для User-Agent SaitRadarBot в robots.txt. По любым вопросам - через форму на главной странице или контакт в политике конфиденциальности.