AIDE: Automated Instruction via Distilled Expertise for Reference-Free Motor Skill Coaching
本文介绍了 AIDE,这是一个新颖的框架,它仅在训练阶段利用专家演示,将专业知识蒸馏到一个无参考模型中,使该模型能够在推理阶段仅通过学习者的姿态序列生成自然语言形式的运动技能指导反馈。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象一个这样的世界:学习一项新技能——比如投篮、踢足球,甚至修理汽车引擎——不再需要一位教练站在你身边。几个世纪以来,学习的最佳方式是观察大师,亲自动手尝试,并根据大师的指点进行微调(有时甚至是严厉的纠正)。但问题在于:真正的专家非常稀缺、昂贵,且一次只能指导少数人。这使得数以百万计的学习者处于迷茫之中,只能靠猜测来了解自己哪里做错了。
人工智能领域应运而生,特别是其中一个致力于教计算机如何“看见”并“理解”人类动作的分支。科学家们一直在构建能够通过观察人的运动视频并给出评分的系统,就像奥运会上的裁判一样。但评分仅仅是一个数字;它并不能告诉你该如何修正动作。为了获得实际的建议,计算机通常需要同时看到学习者和一位正在进行相同动作的完美专家,并将两者进行对比。这种方法在实验室里效果很好,但在现实世界中,你并不总能每次练习新技能时都找一位完美的专家站在你身边。一个大问题是:我们能否教计算机在学习过程中仅利用专家的知识,从而在之后仅通过观察学习者就能给出极佳的建议?
这正是日立公司(Hitachi, Ltd.)的伊藤芳树(Yoshiki Ito)所研究的一篇新论文探讨的核心问题。研究人员引入了一个名为 AIDE(通过蒸馏专家知识实现的自动化教学)的系统。可以将 AIDE 想象成一名学生教练:它有机会在跟随一位世界级导师学习一段时间后,随后必须在没有导师在场的情况下独立进行教学。
这就是奇迹发生的地方。在第一阶段,计算机(即“教师”)观察成千上著学习者与匹配的专家进行相同动作(例如篮球中的跳投)的视频。它学习识别两者之间的细微差别,并写下一份教学报告。至关重要的一点是,它学会了将“学习者的动作”与“学习者与专家之间的差异”区分开来。这就像老师在同时学习两件事:“这是学生做的动作”,以及“这是学生相对于专业人士失误的具体之处”。
在第二阶段,真正的考验开始了。计算机创建了一个“学生”模型。这个学生继承了“教师”的大脑(具体而言,是理解如何读取学习者动作的部分),但失去了看到专家的能力。学生不再能够通过观察专家来计算差异,而是必须仅根据学习者的动作来推测“差异”部分应该是什么样子。这正是巧妙之处所在:学生并不试图逐字逐句地复制老师的笔记,而是学习生成自己版本的“教学建议”,只要这种版本符合相同的模式,并利用了它在与专家共同训练期间吸收的知识。
研究发现,这种方法的效果惊人地好。在篮球和足球数据测试中,AIDE 提供的教学反馈几乎与那些在实际教学环节中仍需专家在场的系统不相上下。它的表现优于那些从未见过专家的系统。研究人员指出,通过让学生模型在训练期间“蒸馏”专家的知识,它能够如此深刻地内化优秀动作的规则,以至于不再需要看到专家。
有趣的是,论文对一些常见观点提出了异议。它指出,你不需要强迫学生去完美模仿教师的内部计算过程(这一过程被称为显式蒸馏)。事实上,试图强迫学生完全复制教师的“差异”笔记反而会让效果变差。当学生能够基于教师的大脑结构,自由地寻找自己的方式来描述问题时,其表现最为出色。作者还证明了,这并非仅仅因为学生模型是一个更大、更强大的计算机;他们证明了即使是一个没有经过专家训练的简化版本,即便拥有相同的规模,也无法胜任这项工作。
虽然结果令人鼓舞,但论文也谨慎地指出,这仍处于研究阶段。该系统在篮球方面表现出色,在足球方面也展现了潜力,但在训练数据较少时,在足球方面的表现略显吃力。研究人员还指出,他们尚未在人类身上测试过该系统——目前仅在计算机模拟的反馈上进行了测试。因此,尽管 AIDE 为未来每个人都能通过手机获得专家级指导指明了方向,但我们尚未完全实现这一目标。不过,这是向着让大师级的智慧随时随地为每个人所用迈出的重要一步。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。