湯姆貓:公司已推出多模態AI語音情感陪伴機器人及“心辰Lingo”語音大模型

金融界3月5日消息,有投資者在互動平臺向湯姆貓提問:請介紹下公司多模態ai的情況。

公司回答表示:公司應用多模態AI技術已研發上線湯姆貓AI語音情感陪伴桌面機器人,該產品擁有情緒識別、長期記憶的特點,能夠實現主動聊天、雙語互動、萬物科普、聽音樂、講故事、語言類遊戲等多個實用性功能。在情緒表達語音多模態模型應用方面,湯姆貓根據表達情感不同,語音語調也會體現出喜怒哀樂等不同語氣,爲用戶提供更擬人化的沉浸式陪伴。同時,公司投資的西湖心辰於2024年創新性推出了語音大模型“心辰Lingo”,該模型實現了端對端語音技術的突破,端到端語音大模型不僅可以語音識別,還集成了自然語言處理、意圖識別、對話管理以及語音合成等多個環節,實現了從語音輸入到語音反饋的完整交互過程,能精確捕捉情感、語氣、音調、環境音等重要特徵,幫助模型更全面地理解語音內容,從而提供更加自然和生動的交互體驗,同時還可以根據上下文和用戶指令,自適應調整語音的速度、高低、噪聲強度,並能夠生成對話、歌唱、相聲等多種風格的語音響應,具備語音實時控制音量、實時打斷等功能,極大地提升了語音交互的靈活性、流暢性及擬人化,可賦能教育、金融、醫療健康、政府與公共服務、媒體與娛樂、零售與商業服務、製造與工程等多個行業的實際應用場景。

本文源自:金融界

作者:公告君