📊 Анализ ситуации с тестами ИИ для AEC (архитектура, инжиниринг, строительство)
📊 Анализ ситуации с тестами ИИ для AEC (архитектура, инжиниринг, строительство) Проанализировано почти 100 тестов искусственного интеллекта в сфере AEC. Из них только 9 соответствуют двум строгим критериям: 🟠 Задача должна быть реальным рабочим процессом в строительстве или архитектуре. 🟠 Тест должен опираться на реальные проектные данные, которые может проверить любой практикующий специалист из отрасли. Это означает, что подавляющее большинство опубликованных бенчмарков либо проверяют абстрактные задачи, либо используют синтетические данные, которые невозможно воспроизвести. ⚙️ Карта реальных задач На изображении представлена диаграмма, которая наглядно показывает «пустоты» в исследованиях. 🟠 В центре — область, где есть открытые тесты (зеленые точки) на реальных данных. 🟠 Красная зона обозначает инструменты общего назначения без специализированного ПО для AEC. 🟠 Синий цвет указывает на коммерческие решения от вендоров. Черный маркер («Human baseline») отмечает ручную работу человека как точку отсчета. Из диаграммы видно, что реальный охват тестирования крайне узок. Большинство критически важных рабочих процессов (например, согласование всех типов чертежей, инженерных систем, графика работ) никто публично не тестирует на реальных данных. 🔍 Ключевые тезисы 🟠 Оценка 90 по одной задаче и 60 по другой несравнимы, так как у каждой задачи свои критерии. 🟠 Пробелы в таблице говорят о том, какие области полностью игнорируются исследователями. 🟠 Публикации результатов сегодня ничего не говорят об эффективности ИИ в целом по индустрии. 🟠 Для оценки инструмента необходимо проводить тестирование именно на ваших собственных данных, разработанное вашей компанией при помощи партнеров вроде AECFoundry. ✅ Резюме Анализ подчеркивает разрыв между шумом вокруг AI в AEC и реальной готовностью инструментов к внедрению. Он призывает отрасль перестать верить маркетингу и начать самостоятельно проверять технологии на своих проектах. Наш Telegram | Наш ВКонтакте