ОГО: GPT-6 Astra смогла улучшить результаты Qwen на математических задачах в 6 раз — и ...
ОГО: GPT-6 Astra смогла улучшить результаты Qwen на математических задачах в 6 раз — и это без дообучения Исследователи из MIT попросили Astra разобраться, почему небольшая моделька Qwen3.5-0.8B плохо решает математику. Оказалось, модель зацикливается в рассуждениях и не успевает дать ответ. Astra самостоятельно исправила 0,016% её весов, всего 131 тысячу параметров из 800 миллионов, и всё заработало. Результат на MATH-500 вырос с 8% до 48%. А на школьных задачах GSM8K — с 13% до 67%. Новый подход назвали Weight-Space Programming. Наконец-то ИИ улучшает ИИ. @xor_journal
31 просмотров