打造个人运动方程式 清大开发AI运动影像分析训练平台
VR沉浸式训练平台。(国科会提供/林志成台北传真)
在国科会支持下,清华大学资讯工程系教授胡敏君团队开发「AI运动影像分析与VR沉浸式训练平台」,协助运动员进行情报搜集与训练,以提升技巧、战术与决策能力。
胡敏君团队所研发相关成果已陆续发表于多个国际顶尖会议以及IEEE Transactions on Multimedia、IEEE Transactions on Visualization and Computer Graphics等重要国际期刊。
胡敏君团队所研发的AI运动影像分析技术可从影片中即时侦测重要事件如投篮、灌篮等,并分析运动员的动作技巧与采用的战术,帮助运动员与情搜人员有效率地标注比赛影片内容,并破解对手的策略。
此外,也可从比赛影片中重建场景和物件的三维(3D)资讯,以任意视角重播赛事的内容,帮助运动员打造沉浸式的VR模拟训练环境,协助强化技巧与战术的认知,进而改善运动技能。
胡敏君说,透过分析大量赛事影片,团队研发出各种生成式模型,以篮球为例,除了即时根据进攻者的移动轨迹生成对应的防守者移动轨迹,亦可根据运动员所设定的对手分析其过去的比赛影片,进而生成该对手采取各种动作时所对应的3D动画,让运动员在VR环境进行训练时,更能模拟真实比赛会发生的情况。
此外,搭配所研发的手势辨识技术,可让运动员在模拟训练的过程中更直觉地与系统互动,也能完整记录运动员面对不同状况的动作反应与表现,有利于训练成效的评估。
为了让AI技术可落地到运动场域让一般大众都能使用,胡敏君也与清大资工系教授朱宏国共同带领学生将所研发之技术延伸成立新创公司(NeuinX),团队更针对行动装置所拍摄的移动视角篮球影片,研发精准且即时的物件追踪与投篮事件分析技术,篮球爱好者可上传或串流自己拍摄的比赛影片,即时产生投篮事件精彩剪辑与投篮热点分布。
除了篮球项目,胡敏君团队也与清华大学运动科技中心之跨校研发团队合作,将相关技术进一步扩散应用于辅助桌球、棒球、拳击、射箭等运动项目之情搜与训练。