Симулированный мозг плодовой мушки проверил код и оказался прав в 88% случаев.
Симулированный мозг плодовой мушки проверил код и оказался прав в 88% случаев. Инженер Ник Ниси из WorkOS запустил карту мозга самца плодовой мушки от Google (176 422 нейрона) на ноутбуке. Муха не читает код, поэтому ИИ-помощник отвечает на 30 вопросов «да/нет» о каждом изменении, а ответы превращаются в запах: воспроизведённый баг горький, безвредное изменение — как сахар. Если запах заставляет муху высунуть язык, она одобряет. На 301 незнакомом изменении муха была права в 88,3% случаев; подбрасывание монеты даёт 50%. Сложный тест провален: из 24 задач, менявших поведение кода, она не одобрила ни одного правильного изменения. Муха выучила «изменилось ли поведение», а не «правильно ли изменение». Простой статистический классификатор на том же запахе показал 94,8%. Муху можно попробовать на собственном pull request. 🖥Мы в Телеграм Новости IT Всемм 💻Мы в Max Новости IT Всемм
Канал в каталоге Максиметера
33 подписчиков · IT и технологии