相关实验视频
Updated: Jan 12, 2026

Deep Neural Networks for Image-Based Dietary Assessment
Published on: March 13, 2021
饮食AI24作为使用多模式大语言模型进行综合营养估计的框架.
Runze Yan1, Hanqi Luo2, Jiaying Lu1
1Center for Data Science, Nell Hodgson Woodruff School of Nursing, Emory University, Atlanta, GA, USA.
DietAI24使用多式大型语言模型 (MLLMs) 和检索增强生成 (RAG) 来从食物图像中准确评估饮食. 这种先进的AI框架显著改善了用于健康研究的营养估计.
科学领域:
- 营养科学 营养科学
- 人工智能的人工智能
- 计算机视觉 计算机视觉
背景情况:
- 准确的饮食评估对于健康研究至关重要.
- 目前基于智能手机的食品图像识别方法在分析现实世界食品图像和仅基本的宏观营养素方面存在局限性.
- 现有的计算机视觉方法缺乏深入研究所需的综合营养分析.
研究的目的:
- 从食物图像开发一个自动化的营养估计框架.
- 使用人工智能提高饮食评估的准确性和全面性.
- 克服营养研究中现有的计算机视觉方法的局限性.
主要方法:
- 开发了DietAI24,一个框架,将多式大型语言模型 (MLLMs) 与检索增强生成 (RAG) 结合起来.
- 利用饮食研究的食品和营养数据库 (FNDDS) 作为权威的营养数据库,以建立MLLM视觉识别.
- 通过利用RAG. 实现了准确的营养估计,而不需要广泛的数据收集或模型培训,通过利用RAG.
主要成果:
- 在ASA24和Nutrition5k数据集上,DietAI24显著优于现有的方法和商业平台.
- 在真实世界混合菜式中,食品重量和关键营养素估计的平均绝对误差 (MAE) 降低了63% (p < 0.05).
- 估计有65种不同的营养素和食品成分,超过了当前溶液的基本宏观营养素分析.
结论:
- 将MLLM与RAG和标准化营养数据库集成,大大提高了饮食评估的准确性,并使全面的营养分析成为可能.
- DietAI24为营养研究和临床应用提供了一个可扩展的解决方案.
- 这一框架有可能通过更准确,更轻松的饮食数据收集,改变大规模的流行病学研究和个性化的饮食干预措施.
相关概念视频
Model Approaches for Pharmacokinetic Data: Distributed Parameter Models
The distributed parameter models are specifically designed to account for variations and differences in some drug classes. This model is particularly useful for assessing regional concentrations of anticancer or...
Model Approaches for Pharmacokinetic Data: Physiological Models
Analysis Methods of Pharmacokinetic Data: Model and Model-Independent Approaches
The model approach uses mathematical models to describe changes in drug concentration over time. Pharmacokinetic models help characterize drug behavior in patients, predict drug concentration in the body fluids, calculate optimum dosage regimens, and evaluate the risk of toxicity. However, ensuring that the model fits the experimental data accurately...
Model-Independent Approaches for Pharmacokinetic Data: Noncompartmental Analysis
One important characteristic of noncompartmental analyses is that drug exposure increases proportionally with increasing doses. This...
One-Compartment Open Model: Wagner-Nelson and Loo Riegelman Method for ka Estimation
On...
Pharmacokinetic Models: Comparison and Selection Criterion
Physiological models take a detailed approach by considering specific molecular processes. They can predict drug distribution, metabolism, and elimination changes, providing a comprehensive understanding of how drugs interact with the body.

