实现手部位置与节奏识别学习技术… 斩获CES创新奖与iF设计奖
获《时代》评选为年度最佳发明,全球AI音乐学习竞争力获验证
不仅能听音乐,还能“读懂演奏动作”的人工智能已经出现。
蔚山科学技术院(UNIST)设计学科 Um Hongyeol 教授研究团队开发出一项音乐学习技术,能够实时读取钢琴演奏者的手部动作,并基于演奏数据即时提供反馈,因此在国际舞台上备受瞩目。
Um Hongyeol 教授团队通过与英国音乐科技企业 ROLI 的产学合作主导设计开发的“ROLI Piano”和“ROLI Airwave”,荣获 2026 年国际消费电子展(CES)创新奖和 iF 设计奖。
该项目还入选了美国时事周刊《时代》(TIME)评选的“最佳发明”(The Best Inventions)。
此次项目中,UNIST 设计学科学生 Lee Dabin、Oh Jaehyeok、Kim Minji 参与其中。Um 教授团队与 ROLI 以构建下一代音乐学习与创作平台为目标,引领了两款产品的设计。大学研究室的成果通过与全球企业的合作,最终落地为真正推向市场的产品,这一点具有重要意义。
核心技术是“ROLI Airwave”。该装置基于精密的手部追踪(hand tracking)技术,实时捕捉演奏者的手部动作。通过分析琴键上方手部的位置与运动,辅助演奏与学习,并通过感知手指位置与手势,提供可视化引导和反馈。其特点在于,使原本在传统乐器教育中不易掌握的手位、时机和表现方式,都能一目了然。
这项技术与 ROLI 的数字乐器系统结合,拓展为同时支持演奏、学习与创作的交互式平台。尤其是与“AI Music Coach”联动,分析演奏数据并将结果实时反馈给用户。使用者即便独自练习,也能检查自己的演奏情况,并立刻弥补不足之处。
AI Music Coach 是一套基于演奏者动作与演奏数据,提供个性化定制反馈的系统。它突破了以往单向授课的模式,构建了以数据为基础的交互式音乐教育环境。通过这一系统,可以减少学习过程中的反复试错,并提出一种拓展演奏者创造性表达的新路径。
UNIST 此次获奖成果证明,大学研究室的设计研究同样能够在全球市场获得认可,也为将音乐教育转变为基于数据的个性化体验指明了方向。
Um Hongyeol 教授表示:“这一项目向世界证明,设计研究可以与技术创新相结合,落实为在产业现场真正运作的产品。今后将以 UNIST 的人工智能设计教育为基础,继续推进改变音乐教育与创作体验的研究,并持续推出在全球市场具有竞争力的成果。”
ROLI 是一家开发下一代数字乐器和音乐创作工具的英国音乐科技企业。与 Um 教授团队的产学合作伙伴关系已持续 3 年,双方正以革新音乐教育与创作体验的设计研究为中心,不断扩大合作范围。
版权所有 © 阿视亚经济。未经许可不得转载,禁止用于AI训练及使用。