多模态数字厨师烹饪系统

大幅提升指令合理性

一个融合专业厨师多模态知识库与大模型微调的硬件-软件烹饪系统，能实时生成高质量烹饪指令，让用户精准掌控火候与成熟度。

Li, Xinyuan · 李柏 · Yueshuo, Sun · Zhang, Tantan · Tian, Yonglin · Yin, Zhuyan · 王飞跃

Chinese Journal of Intelligent Science and Technology 2024

技术优势

不认火候也能煎好牛排

系统用热传感器实时感知温度并生成指令，让用户照着做就能控制牛排熟度，不再依赖个人经验判断。

指令更靠谱了

微调后的多模态大模型准确性和合理性显著提升，给出的每一步操作更符合专业厨师的逻辑。

应用场景

• 服务机器人：为送餐或备餐机器人增加实时烹饪指导能力，让机器人能配合用户完成复杂菜肴制作。
• 智能家居：作为智能厨房的核心模块，联动传感器和语音交互，让普通家庭也能复现专业厨师的烹饪火候。
• 人机交互：把厨师操作记录转化为多模态交互指令，让用户通过视觉、语音提示获得自然的人机协作体验。
• 食品加工自动化：将专业厨师的连续操作数据用于模型训练，使自动化烹饪设备能够输出更符合实际加工流程的步骤。