联通在线申请多模态多任务智能交互方法专利,能够更快速、更准确地完成交互任务

金融界2024年10月21日消息,国家知识产权局信息显示,联通在线信息科技有限公司申请一项名为“多模态多任务智能交互方法、装置、电子设备及存储介质”的专利,公开号CN 118760359 A,申请日期为2024年8月。

专利摘要显示,本发明涉及多模态多任务智能交互方法、装置、电子设备及存储介质,该方法包括:获取多模态数据,并对多模态数据进行预处理和特征提取,以构建多模态知识库。接收输入的多模态信息,并基于多模态信息对当前用户和使用场景进行识别,以获取当前用户和使用场景对应的多个任务。将多个任务作为Transformer多任务模型的输入,以将多个任务组成相应的多头模型,并将不同任务的特征进行信息融合,建立多模态理解框架,以输出多个任务对应的识别结果。基于识别结果选取相应的交互策略,按照交互策略生成相应的交互内容并对交互内容进行可视化展示。该方法引入更多的交互方式,贴近用户的习惯和需求,能够更快速、更准确地完成交互任务。

本文源自:金融界

作者:情报员