实现手部位置与节奏识别学习技术… 斩获CES创新奖与iF设计奖

获《时代》评选为年度最佳发明,全球AI音乐学习竞争力获验证

不仅能听音乐,还能“读懂演奏动作”的人工智能已经出现。


蔚山科学技术院(UNIST)设计学科 Um Hongyeol 教授研究团队开发出一项音乐学习技术,能够实时读取钢琴演奏者的手部动作,并基于演奏数据即时提供反馈,因此在国际舞台上备受瞩目。


Um Hongyeol 教授团队通过与英国音乐科技企业 ROLI 的产学合作主导设计开发的“ROLI Piano”和“ROLI Airwave”,荣获 2026 年国际消费电子展(CES)创新奖和 iF 设计奖。


该项目还入选了美国时事周刊《时代》(TIME)评选的“最佳发明”(The Best Inventions)。

UNIST Eom Hongyeol 教授团队荣获《时代》杂志“最佳发明”、CES 创新奖和 iF 设计奖。

UNIST Eom Hongyeol 教授团队荣获《时代》杂志“最佳发明”、CES 创新奖和 iF 设计奖。

View original image

此次项目中,UNIST 设计学科学生 Lee Dabin、Oh Jaehyeok、Kim Minji 参与其中。Um 教授团队与 ROLI 以构建下一代音乐学习与创作平台为目标,引领了两款产品的设计。大学研究室的成果通过与全球企业的合作,最终落地为真正推向市场的产品,这一点具有重要意义。


核心技术是“ROLI Airwave”。该装置基于精密的手部追踪(hand tracking)技术,实时捕捉演奏者的手部动作。通过分析琴键上方手部的位置与运动,辅助演奏与学习,并通过感知手指位置与手势,提供可视化引导和反馈。其特点在于,使原本在传统乐器教育中不易掌握的手位、时机和表现方式,都能一目了然。


这项技术与 ROLI 的数字乐器系统结合,拓展为同时支持演奏、学习与创作的交互式平台。尤其是与“AI Music Coach”联动,分析演奏数据并将结果实时反馈给用户。使用者即便独自练习,也能检查自己的演奏情况,并立刻弥补不足之处。


AI Music Coach 是一套基于演奏者动作与演奏数据,提供个性化定制反馈的系统。它突破了以往单向授课的模式,构建了以数据为基础的交互式音乐教育环境。通过这一系统,可以减少学习过程中的反复试错,并提出一种拓展演奏者创造性表达的新路径。


UNIST 此次获奖成果证明,大学研究室的设计研究同样能够在全球市场获得认可,也为将音乐教育转变为基于数据的个性化体验指明了方向。


Um Hongyeol 教授表示:“这一项目向世界证明,设计研究可以与技术创新相结合,落实为在产业现场真正运作的产品。今后将以 UNIST 的人工智能设计教育为基础,继续推进改变音乐教育与创作体验的研究,并持续推出在全球市场具有竞争力的成果。”



ROLI 是一家开发下一代数字乐器和音乐创作工具的英国音乐科技企业。与 Um 教授团队的产学合作伙伴关系已持续 3 年,双方正以革新音乐教育与创作体验的设计研究为中心,不断扩大合作范围。


本报道由人工智能(AI)翻译技术生成。

版权所有 © 阿视亚经济。未经许可不得转载,禁止用于AI训练及使用。

不容错过的热点