🧩 Разбор · Habr
🧩 Разбор · Habr Исследование AI Observatory: реальное использование ИИ отличается от отчетов компаний 🧩 Разбор Исследователи из AI Observatory, курируемого Стэнфордским университетом, проанализировали диалоги с ИИ-моделями, собранные с согласия пользователей. Их данные показывают, что реальные сценарии использования ИИ, в том числе для личных целей, встречаются чаще, чем отражено в отчётах крупных компаний, фокусирующихся на рабочих сценариях. Исследование выявило различия в использовании разных моделей и динамику этих паттернов со временем. 🔢 Детали и аргументы • Исследовательский проект AI Observatory агрегирует и анализирует диалоги с популярными моделями ИИ, такими как Claude и Gemini, собранные с согласия пользователей из семи наборов данных. • Исследование AI Observatory показало, что если бы к их данным применялись методы фильтрации Anthropic Economic Index, фокусирующиеся на работе, почти половина (48%) разговоров была бы отфильтрована. • Нерабочие разговоры, отфильтрованные AI Observatory, чаще касались тем здоровья и отношений (44,2%), тем для взрослых или незаконных (7,9%), домогательств и ненависти (27,5%) и сексуального контента (16,7%). • Диалоги в наборе данных WildChat, изученном AI Observatory (2023-2025 гг.), со временем становились длиннее и сложнее, с увеличением количества личных разговоров. • В период с 2023 по 2025 год количество обменов сообщениями, помеченных как конфиденциальные (потенциально вредный или запрещённый контент), стало реже, что может указывать на улучшение мер защиты платформ. • Различные модели ИИ использовались для разных целей: Grok и Gemini — для поиска информации (Grok особенно для новостей/политики), Anthropic — для программирования, Gemini — для общения/ролевых игр, ChatGPT — для помощи с домашними заданиями. • Различия в использовании были отмечены даже между версиями одной модели: с ChatGPT на GPT-3.5 вели более короткие беседы, чем с GPT-4. • Объём данных AI Observatory (около 100 тыс. диалоговых реплик) значительно меньше, чем у крупных компаний, например, Anthropic (1 млн бесед) или OpenAI (1,5 млн бесед). ⚖️ Ограничения и выводы из источника Крупные компании, такие как Anthropic и OpenAI, публикуют отчёты об использовании своих ИИ-продуктов, но эти данные могут не отражать реальную картину из-за фильтрации нерабочих сценариев. 👀 Что отслеживать Данные AI Observatory будут доступны исследователям для дальнейшего анализа, и команда надеется со временем расширить свои наборы. ↗ Оригинал: https://habr.com/ru/news/1072796/