ChatGPT-User обошёл robots.txt на 54% проверенных страниц
ChatGPT-User обошёл robots.txt на 54% проверенных страниц Платформа TollBit обнаружила, что ChatGPT-User обращался к страницам, запрещённым ему посещать через robots.txt, в 54% случаев. Это наивысший показатель среди европейских сайтов в выборке TollBit. Однако OpenAI предупреждает о том, что ChatGPT-User не используется для автоматического обхода страниц, а из-за инициирования запроса пользователем правила robots.txt могут к нему не применяться. Источник: https://www.ixbt.com/news/2026/08/16/chatgpt-user-robots-txt-54-openai.html
28 просмотров