- Сообщения
- 3 659
- Реакции
- 24
- Баллы
- 1 821
Китайские исследователи разработали нейросеть, которая по фотографии определяет блюдо, его вкус и сколько в нем белков, жиров и углеводов.
Для обучения модели ученые использовали около 2 тыс. студийных фотографий 32 популярных в Китае готовых обедов с курицей, свининой и говядиной. Ученые проанализировали химический состав каждого блюда и обучили мультимодальную нейросеть связывать внешний вид еды с ее составом. Она узнает блюдо по фото в 91,5% случаев, а белки, жиры и углеводы оценивает близко к лабораторным данным.
Модель протестировали на добровольцах - люди рассказали о своих предпочтениях и требованиях по калориям, а нейросеть подобрала каждому обеды. Рекомендации ИИ получили 8 из 9 баллов.
Разработку планируют применять на пищевом производстве для контроля качества: камера будет отбраковывать порции еще до упаковки. Для обычных пользователей исследователи хотят разработать приложение, которое по фото тарелки считает калории и рекомендует блюда - но для этого понадобится гораздо больше данных.
