Объективно оценить возможности ИИ-моделей почти невозможно — к такому выводу пришли исс... — 16 сентября 2026 г. в 15:55:42.797
Объективно оценить возможности ИИ-моделей почти невозможно — к такому выводу пришли исследователи после эксперимента с 162 добровольцами. Участников разделили на три группы и дали им решать задачи с помощью нейросетей, но намеренно перепутали названия моделей. Одни думали, что работают с устаревшими GPT-3.5/4 или Claude Haiku 3, а на деле использовали флагманы вроде GPT-5 или Sonnet 4. Другим повезло меньше: они считали, что общаются с сильной моделью, но получали ответы от более слабой. Третья группа — контрольная — знала настоящие имена моделей. Результаты показали: решающим фактором оказались не фактические ответы, а ожидания. Те, кто верил в мощь модели, заранее ждали от неё чуда и потом сильнее разочаровывались. Те же, кто думал, что им досталась слабая нейросеть, удивлялись её «сообразительности». Причём оценка после работы не коррелировала с реальным качеством ответов — важны были только оправданность ожиданий и рост уверенности пользователя в себе. «Люди оценивают питч, а не продукт», — резюмируют авторы. А вы сможете на глаз отличить GPT-4 от GPT-5? — конечно, сходу — не факт... 🖥️Мы в Телеграм Новости IT Всемм 💻Мы в Max Новости IT Всемм