工研院×公视 打造AI手语气象主播

工研院与公视携手合作,透过与专业手语主播合作建置的气象手语语料库,结合人工智慧骨架生成技术和深度学习模型,能生成AI虚拟主播以流畅的手语动作与表情,即时播报气象。不仅提升气象资讯的普及性,更为听障者带来可即时掌握天灾等警讯之全新解决方案,为资讯无障碍推动跨出重要一步,展现公益科技的实践力。

工研院董事长吴政忠表示,「科技始终来自于人性」 ,AI科技可以帮到需要帮助的人。观察现行听觉机能障碍者,与手语翻译员,供需之间存在一定的差距。希望「AI虚拟手语气象主播」不仅填补手语翻译人力的缺口,也能让聋人透过大众媒体获得平等的资讯权利。

公广集团董事长胡元辉表示,公视长期制作身障相关节目《手语新闻》与《听听看》等。随着AI科技演进,公广集团积极思考运用科技的力量,为听障朋友打造更友善的媒体环境。

工研院资通所所长丁邦安表示,不同于现行一般AI主播技术,主要处理语音生成、对嘴同步相对单纯。手语是一种视觉语言,具有表达的复杂性,手部动作的精确极为重要,需要高精度的骨架估算技术与深度学习手势生成模型,同时,加上手语发展会受到当地口语影响,须透过专业的手语翻译员及听障者共同建立语料库。