恭喜合肥綜合性國家科學中心人工智能研究院(安徽省人工智能實驗室)鄒鵬獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網恭喜合肥綜合性國家科學中心人工智能研究院(安徽省人工智能實驗室)申請的專利一種在線輔助語音對話場景的多模態情感提示方法及系統獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN119479705B 。
龍圖騰網通過國家知識產權局官網在2025-04-18發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202510073682.7,技術領域涉及:G10L25/63;該發明授權一種在線輔助語音對話場景的多模態情感提示方法及系統是由鄒鵬;王飛;周愿恩;趙佳琪;汪萌設計研發完成,并于2025-01-17向國家知識產權局提交的專利申請。
本一種在線輔助語音對話場景的多模態情感提示方法及系統在說明書摘要公布了:本發明公開了一種在線輔助語音對話場景的多模態情感提示方法及系統,涉及人工智能技術領域,將語音對話場景中的語音信號輸入到訓練好的多模態情感提示大模型中,輸出情感標簽及語音情感提示信息;多模態情感提示大模型的訓練過程如下:獲取真實對話場景的原始語音數據以構建情感識別的訓練數據集;對訓練數據集中的原始語音數據進行特征提取,得到原始語音特征向量;將原始語音特征向量輸入到稀疏橋接Transformer模塊中,輸出融合特征;將融合特征輸入到大語言模型中,通過文本解碼生成連貫的語音情感提示信息,并關聯對應的情感標簽;該多模態情感提示方法及系統,實現了對在線輔助語音對話場景下語音情感的精準分析與提示。
本發明授權一種在線輔助語音對話場景的多模態情感提示方法及系統在權利要求書中公布了:1.一種在線輔助語音對話場景的多模態情感提示方法,其特征在于,將語音對話場景中的語音信號輸入到訓練好的多模態情感提示大模型中,輸出情感標簽及語音情感提示信息;多模態情感提示大模型的訓練過程如下:構建情感識別的訓練數據集;設計Prompt提示詞并轉換為文本向量,對訓練數據集中的原始語音數據進行特征提取得到原始語音特征向量并輸入到稀疏橋接Transformer模塊中,將查詢Q-query與稀疏自注意力機制的鍵和值進行匹配,生成語音情感向量,將語音情感向量作為查詢,將原始語音特征向量作為鍵和值,基于稀疏交叉注意力機制計算得到對齊后的語音情感向量,將文本向量與經過線性層處理后的語音情感向量融合得到融合特征,所述Q-query是隨機初始化的可學習向量;將融合特征輸入到大語言模型中,通過文本解碼生成連貫的語音情感提示信息,構建總損失函數,反向傳播調整多模態情感提示大模型的可訓練參數。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人合肥綜合性國家科學中心人工智能研究院(安徽省人工智能實驗室),其通訊地址為:230000 安徽省合肥市高新區望江西路5089號,中國科學技術大學先進技術研究院未來中心B1205-B1208;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。