聯通在線申請多模態多任務智能交互方法專利,能夠更快速、更準確地完成交互任務

金融界2024年10月21日消息,國家知識產權局信息顯示,聯通在線信息科技有限公司申請一項名爲“多模態多任務智能交互方法、裝置、電子設備及存儲介質”的專利,公開號CN 118760359 A,申請日期爲2024年8月。

專利摘要顯示,本發明涉及多模態多任務智能交互方法、裝置、電子設備及存儲介質,該方法包括:獲取多模態數據,並對多模態數據進行預處理和特徵提取,以構建多模態知識庫。接收輸入的多模態信息,並基於多模態信息對當前用戶和使用場景進行識別,以獲取當前用戶和使用場景對應的多個任務。將多個任務作爲Transformer多任務模型的輸入,以將多個任務組成相應的多頭模型,並將不同任務的特徵進行信息融合,建立多模態理解框架,以輸出多個任務對應的識別結果。基於識別結果選取相應的交互策略,按照交互策略生成相應的交互內容並對交互內容進行可視化展示。該方法引入更多的交互方式,貼近用戶的習慣和需求,能夠更快速、更準確地完成交互任務。

本文源自:金融界

作者:情報員