AI評測指引 3月底公布

台湾AI(人工智慧)评测中心去年底挂牌,预计今年三月底正式公布AI评测指引,首波将推动已登录「AI技术服务机构能量」的业者进行评测,未来也会鼓励ChatGPT、Llama等国际大型AI语言模型送测,以起到示范效果。

ChatGPT、Llama等生成式AI应用在全球引起风潮,不过,目前市面上的生成式AI语言模型大多来自英语系国家,因此,在翻译为中文、日文、韩文之后,生成出来的文本,不见得符合当地民情。

举例来说,同一个英文单词「Notebook」,在台湾翻译为「笔记型电脑」,在中国大陆翻译为「笔记本电脑」,在港澳地区翻译为「手提电脑」;但国际大型AI语言模型目前还在发展中,翻译生成的中文用语,可能还无法因应各地民情给出精确的文字内容,仍待调教。

因应各地用语均不相同,专家认为,未来,如果不是国际大型AI语言模型针对各地习惯用语做调整,那就是各国软体业者因应本地文化需求,发展出独有的生成式AI。

为评测生成式AI应用是否符合本地使用,数位部旗下AI评测中心去年底挂牌,规画以语言模型作为评测对象。

数位部数位产业署副署长林俊秀指出,目前针对语言模型,已拟定十项AI评测项目,包含安全性、可解释性、弹性、公平性、准确性、透明性、当责性、可靠性、隐私及资安等,待技术审议小组、制度委员会完成AI评测指引内容审议之后,预计三月底之前会公布,以利外界理解评测执行方式跟标准。

目前政府主管机关并未强制企业必须将旗下研发的语言模型送测,不过,林俊秀表示,待评测指引发布后,会先推广国内上百家登录AI技术服务机构服务能量的企业来做评测,另外,今年也会规画推动国科会研发的AI语言模型TAIDE来进行测试。