开发一款通过观看烹饪视频学习菜谱并重现烹饪的机器人:Karapaia
给机器人播放烹饪视频,让它做饭。有几家公司正在尝试开发烹饪机器人,比如重现名厨味道的机器人,但到目前为止,它们的技能还无法与人类匹敌。看来烹饪食谱是互联网上的热门内容,YouTube 上发布了许多有用的视频。通过观看此内容,任何人都可以在家中轻松学习专业厨师的技能。 “如果这是一个机器人,那就没那么容易了。”即使你能设法编写食谱,教它如何在厨房做饭将是一项艰巨的任务。因此,剑桥大学Fumiya Iida副教授领导的研究团队提出了让机器人通过视频学习烹饪成为可能的想法。机器人“厨师”通过观看美食视频学习重新制作食谱 首先,让他们制作沙拉,研究团队首先使用了公开的神经网络(一种以数学方式表达人脑神经回路结构的方法)。训练机器人识别食物和物体。最重要的是,我让他们学习一本包含 8 种不同沙拉食谱的“食谱”,并向他们展示了他们实际制作沙拉的视频。然后,从视频中,他能够正确猜测正在制作食谱中的哪个食谱。当机器人看到视频时,它使用计算机视觉来分析视频的每一帧并检测刀具和配料等各种物体的特征,以及人类手臂的运动。这些信息被转换为矢量(运动方向和距离的数学表示)。使用这些数据,机器人可以比较食谱和视频,以确定正在准备哪些菜肴。结果相当准确,在播放 16 个视频时,它能够正确检测 83% 的人体动作,并正确识别 93% 的食谱。 “如果一个人有一把菜刀和一根胡萝卜,就可以预测他们将来会切胡萝卜。”而且,即使配方有一些差异,比如数量加倍或者人为错误,他们也能够正确地判断出是同一个配方。不仅如此,他甚至还设计了一种新的沙拉食谱并实际制作出来,所以未来的可能性是不可估量的。机器人厨师制作的苹果和胡萝卜杜松子酒沙拉。即使现在很尴尬,将来也有可能成为一名专业人士/图片来源:剑桥大学 未来,机器人可以在家制作视频食谱。它不是像电影那样通过快速的摄像工作和视觉效果来制作的烹饪视频。拍摄过程中注意让机器人尽可能易于理解,例如人类拿起胡萝卜,以便可以看到整体。即便如此,如果机器人的识别能力不断提高,预计它们最终将能够从 YouTube 上的视频中学习各种食谱。在法国,世界上第一家由机器人烹饪的披萨餐厅已经开业,但在不久的将来,可能会出现一个会观看视频并代表你重现食物的机器人。参考文献:机器人“厨师”通过观看美食视频学习重新制作食谱 | 剑桥大学 / hiroching 撰写 / parumo 编辑