Тестировщикам, и не только, — к просмотру 😉
Тестировщикам, и не только, — к просмотру 😉 27 августа провели Bugs Busters — митап для QA-специалистов. Спикеры из ЮMoney рассказали, как мы применяем ИИ для анализа причин падения e2e-автотестов, как устроен инструмент для подбора оптимальной LLM-модели под задачу, а также поделились практиками построения обвязки вокруг агентов. Выводы из выступлений: 🟣 Рабочий рецепт починки автотеста: добавляем стектрейс, шаги, логи приложений бэкенда и фронтенда, HTML — и правильный промпт. 🟣 Быстро оценивать качество AI-моделей можно с помощью готовых open-source-решений со встроенным LLM-судьёй. Например, взять Langfuse и дополнить его удобной UI-обёрткой для работы с датасетами и отчётами. 🟣 Важно не только настраивать обвязку, но и регулярно оценивать её эффективность. А что это значит на практике — смотрите в записях докладов, если пропустили митап. Записи сохранили во «ВКонтакте», на Rutube и YouTube, а фотографиями поделились в альбоме.
Канал в каталоге Максиметера
19 подписчиков · IT и технологии