台大开发Stiller系统 60秒撷取剧照

台大电机工程系特聘教授陈宏铭(右)、台大资讯工程系学生曹峻宁(左)合影。(KKStream提供)

KKBOX旗下影音串流服务技术公司KKStream,与台大电机工程系特聘教授陈宏铭研究团队合作,开发智慧剧照挑选系统「Stiller」,以线上影音服务KKTV支援剧库资料,以AI技术60秒撷取剧照,不只可提升影片点击播放率,更能减少美术人员逐格截图作业时间,团队师生获国际电机电子工程师学会邀请,赴美发表研究成果。

参与系统设计的台大资讯工程系毕业生曹峻宁表示,开发「Stiller」智慧剧照挑选系统,主要是结合关键影格撷取、影像美感评估两大技术,可从影片中挑选兼备代表性、具吸引力的剧照。

曹峻宁提到,透过AI人工智慧系统,「Stiller」只需3集的影片量,就能用演算法判断出男女主角是谁,并且自动撷取精彩影集剧照,未来希望能有机会延续这项研究,开发出自动剪辑预告,甚至做出浓缩影片成果,让AI不只看见画面、还能看懂影片。

曹峻宁指出,这次研究成果的技术是「视讯理解」,透过KKStream和影片管理团队访谈,聚焦影片剧照挑选实务应用,从脸部表情到动作场景,透过不同面向强化AI对视讯理解的能力,现阶段能判读重要影片情境并挑选剧照,每集影片均花60秒就能撷取剧照,大幅缩减美术人员逐格截图作业时间,并借由剧照达成吸睛效果,提升影迷点击播放意愿。未来「Stiller」除了运用在偶像剧,技术也将持续朝不同类型影片发展。

陈宏铭说,台大和KKBOX集团已经有多年产学合作经验,乐见KKStream提供先进影音串流平台给研究团队实习,适时结合学术理论于产业实作中,才能获得成功。而多媒体科技在影音串流时代的重要性,绝对有目共睹,学术研发促进产业发展,正是产学交流的初衷。