mail.ru

Как проверить, что он настоящий

Владелец не публикует ни сетей, ни адресов — назваться этим ботом может кто угодно. Судите по поведению и сети, из которой он пришёл.

Как закрыть в robots.txt

User-agent: mail.ru
Disallow: /

Честные боты уходят сами. В AW IP Analyzer это делается на вкладке «Боты»: плагин добавит запрет в robots.txt, а тем, кто его игнорирует, ответит 403. Страница бота: knownagents.com.