📸 ИИ научили распознавать вкус еды по фото
📸 ИИ научили распознавать вкус еды по фото Китайские исследователи разработали нейросеть, которая по фотографии определяет блюдо, его вкус и сколько в нем белков, жиров и углеводов. Для обучения модели ученые использовали около 2 тыс. студийных фотографий 32 популярных в Китае готовых обедов с курицей, свининой и говядиной. Ученые проанализировали химический состав каждого блюда и обучили мультимодальную нейросеть связывать внешний вид еды с ее составом. Она узнает блюдо по фото в 91,5% случаев, а белки, жиры и углеводы оценивает близко к лабораторным данным. Модель протестировали на добровольцах — люди рассказали о своих предпочтениях и требованиях по калориям, а нейросеть подобрала каждому обеды. Рекомендации ИИ получили 8 из 9 баллов. Разработку планируют применять на пищевом производстве для контроля качества: камера будет отбраковывать порции еще до упаковки. Для обычных пользователей исследователи хотят разработать приложение, которое по фото тарелки считает калории и рекомендует блюда — но для этого понадобится гораздо больше данных.