不用滑鼠也能操作电脑  台科大开发手势远距操控!准确率达9成

▲台科大与「酷手科技合作研究开发创新的手势控制人机介面技术,透过手环上的感测器侦测手腕肌动,只要动动手指,就能将人手变成遥控器。(图/台湾科技大学提供)

记者崔至云台北报导

不需滑鼠摇杆,只要戴上手环做出手势指令,就能远距操作电脑、玩VR游戏!台科大与「酷手科技」合作研究,开发创新的手势控制人机介面技术,透过手环上的感测器侦测手腕肌动,使用者只要动动手指,就能将人手变成遥控器,成为能远距控制各种电子机械设备的魔法手环。台科大指出,酷手科技2018年起与机械系教授刘孟昆展开合作,开发创新手势控制人机介面技术,由刘孟昆带领学生郭昭广林昱廷邱兆伟,以人工智慧讯号处理演算法,开发手势远距操控技术。研究成果不仅在2019年获得科技部产学计划奖项,也获证台湾发明专利,更于近期登上顶尖国际期刊《IEEE Sensors Journal》。

▲台科大教授刘孟昆(左3)带领学生郭昭广(左1)、邱兆伟(左2)、林昱廷(左5),开发手势远距操控技术,研究成果在获得2019科技部产学计划奖项。(图/台湾科技大学提供)台科大校长廖庆荣表示,这次参与计划的同学当初都是参加实务专题课程的大三学生,透过实务专题和指导教授厂商一起投入研发工作,不仅在学生时代就获得许多实务专题奖项,更提早与业界接轨,快速累积实作经验,培养跨领域的沟通合作能力。台科大说明,与酷手科技透过手腕侦测肌动讯号,来识别使用者手势技术,利用手环上的感测器侦测震动讯号,进而分析使用者的动作手势,再借由蓝牙连线远距控制手机、电脑、智慧型头戴式装置等,达到真正的远距操控。

▲台科大与酷手科技合作研发智慧手环 ,感测手腕肌动进行远距操控,研究成果登IEEE国际期刊。(图/台湾科技大学提供)

刘孟昆表示,振动讯号有别于电或光学方式,并不受皮肤流汗影响,稳定性佳且在室外、潮湿环境都可以使用。不过,振动讯号源相对复杂,因此台科大团队透过人工智慧与讯号处理的演算法,找到最显著的特征组合,不但可以缩短计算时间、反应时间准确率更可以达到92%,对系统的稳定性及耗电量有很大的助益。负责软体程式开发的台科大电机所硕二学生邱兆伟表示,透过专案学习到机器学习软体和最佳特征选取的演算法,在执行的过程中遇到问题都要想尽办法找出问题点,并且针对问题重新修改程式,边做边调整,透过参与专题才第一次有机会接触讯号处理领域,撰写程式的能力也有很大的突破,是很大的收获。

▲台科大研究团队。(图/台湾科技大学提供)参与研究计划的台科大机械所硕二学生林昱廷,负责滤波、产生特征等前处理。林昱廷表示,参与专题之前完全不懂讯号处理,透过和老师讨论,查找网路资源学习、研究论文,慢慢摸索练习,最后不仅学会如何写程式、机器学习、滤波、特征选取等讯号处理的方法,研究手腕肌动的过程中,也收获了不少肌群相关医学知识,学到机械系本科专业外的新知识领域。