ИИ-агенты: инженеры или учёные?
ИИ-агенты: инженеры или учёные? Новое исследование на arXiv (13 августа) системно проверило семь ведущих моделей на 36 длинных исследовательских задачах. Результат жёсткий: сегодняшние AI-агенты (системы, которые сами планируют и выполняют цепочки действий) работают как сильные инженеры-оптимизаторы, а не как настоящие учёные. Авторы ввели детальные метрики: Solution Framing (как формулируют задачу), Execution и Feedback Control. Оказалось, что одинаковые финальные баллы часто скрывают совершенно разные узкие места в процессе. Повторное использование опыта помогает далеко не всегда — иногда вводит в заблуждение. А дизайн harness (окружения, в котором живёт агент) сильно влияет на стабильность результатов. Настоящая методологическая новизна встречается редко: агенты в основном комбинируют уже известные приёмы. Это важный сигнал для всей отрасли. Чтобы агенты действительно вели открытое исследование, нужны новые подходы к обучению, управлению опытом и конструкции harness. Нопулярные сегодня модели - это скорее инженеры, а не творческие исследователи и учёные (эти модели уже в процессе вывода на рынок). Источники: https://arxiv.org/abs/2608.13417 #AI #AIAgents #Research #arXiv #LongHorizon #AgenticAI