Нейросети: сбор данных и обучение

GPTBot (OpenAI)

OpenAI собирает тексты для обучения моделей GPT. Трафика не приносит.

решаете вы

Визитов за 30 дней747

Сайтов, где встречался16

Самозванцев0%

Активность на сайтах-участниках

Визиты в день за 30 дней

Как проверить, что он настоящий

Проверяется по официальному списку адресов.
Проверяется по сети AS8075.

AW IP Analyzer делает это сам: бот с таким User-Agent из чужой сети считается самозванцем и получает проверку браузера.

Как закрыть в robots.txt

User-agent: GPTBot
Disallow: /

Честные боты уходят сами. В AW IP Analyzer это делается на вкладке «Боты»: плагин добавит запрет в robots.txt, а тем, кто его игнорирует, ответит 403.