政大资管团队手语语音辨识 抡元

国立政治大学之团队获资讯应用组第一名。图/业者提供

听障人士在生活中诸多不便,在疫情中因口罩的隔阂更为突显。在简士镒老师指导下,国立政治大学资管系曹子涵、朱芷伶、张郁雯、宋志谦及谢承霖同学组队参加「第27届大专校院资讯应用服务创新竞赛」,以「SignLens-手语语音辨识于混合实境应用」,协助金融业服务听障人士更贴心,获得资讯应用组二之第一名。

目前常见的手语翻译软体大多仅提供手语转换文字的单向沟通,然而顺畅的沟通不能单仰赖其中一方。

团队成员曹子涵表示,尤其是金融或医疗场域,由于涉及隐私,场景特殊,并不在政府手语沟通补助范围之内,但许多专有名词应用及资讯不平等之情势,常使听障人士因沟通不顺畅,导致个人权益损失。国外已有成功HoloLens2装置,将手语及语音转换成文字,即时协助听障人士与听人之间更顺畅的双向沟通,团队将此一创意本土化,实测应用准确度已可达8成至8成5。

这是一场很盛大,很专业的竞赛,团队成员说,此次参与竞赛的作品同时也是团队毕业专题,最大的收获是评审或其他老师的精辟见解,团队得以从原本日常手语对话之空泛目标,变得更为聚焦在金融场景,也了解不同产业应用开发时,应特别注意的问题,进一步精进毕业专题。尤其是在决赛的过程中,有机会看到同样的技术,所发展出不同的新颖应用及看法,更多所启发。

展望未来,希望透过订阅服务,解决金融业听障人士服务之痛点,将应用扩及医疗领域,甚至日常生活应用情境。