廈門大學沈斌梅獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網獲悉廈門大學申請的專利基于多模態情感分析的個性化英語教育系統及方法獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN120086805B 。
龍圖騰網通過國家知識產權局官網在2025-08-26發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202510567885.1,技術領域涉及:G06F18/25;該發明授權基于多模態情感分析的個性化英語教育系統及方法是由沈斌梅;陳龍彪;孫銥璐;吳怡可;楊政;黎若涵設計研發完成,并于2025-04-30向國家知識產權局提交的專利申請。
本基于多模態情感分析的個性化英語教育系統及方法在說明書摘要公布了:本申請提供一種基于多模態情感分析的個性化英語教育系統及方法,其系統包括:用于接收并處理學生的多模態數據的多模態交互模塊、用于對輸入的多模態數據進行情感分析的情感識別模塊、基于學生的歷史學習數據評估該學生的實時學習狀態的個性化模塊、根據情感狀態與實時學習狀態動態調整互動反饋的核心大腦模塊。情感識別模塊包括情感信息融合,情感信息融合采用加權策略,并通過情感一致性約束和沖突修正機制來調整最終輸出的情感狀態。本申請通過情感一致性損失函數、沖突修正機制和基于知識圖譜的超綱控制機制,精準識別學生情感和認知狀態。
本發明授權基于多模態情感分析的個性化英語教育系統及方法在權利要求書中公布了:1.一種基于多模態情感分析的個性化英語教育系統,其特征在于:包括: 多模態交互模塊:用于接收并處理學生的多模態數據,所述多模態包括文本模態數據、音頻模態數據、圖像模態數據和視頻模態數據; 情感識別模塊:用于對輸入的多模態數據進行情感分析,包括語音情感識別、視頻情感識別和情感信息融合;其中,所述情感信息融合采用加權策略,并通過情感一致性約束和沖突修正機制來調整最終輸出的情感狀態; 個性化模塊:基于學生的歷史學習數據評估該學生的實時學習狀態,并生成個性化的學習反饋報告; 核心大腦模塊:用于根據情感識別模塊的情感狀態與個性化模塊輸出的實時學習狀態,動態調整互動反饋; 所述情感識別模塊中,情感一致性約束具體過程包括: 輸入語音信號和圖像數據,并分別提取語音情感特征和圖像情感特征; 對語音情感特征和圖像情感特征進行特征對齊,獲得同一情感空間中的特征表示; 特征對齊后,計算語音情感特征和圖像情感特征之間的歐幾里得距離;根據歐幾里得距離以及交叉熵損失函數建立情感一致性損失函數; 將情感一致性損失函數與基礎分類損失聯合優化得到的綜合損失; 所述情感識別模塊中,沖突修正機制具體過程包括: 利用對齊后的特征空間計算各模態的置信度,包括計算語音情感分類置信度和圖像情感分類置信度: 沖突檢測:首先,將各模態置信度最高的情感作為識別結果;如果某個模態在所有情感類別中的最高分類置信度小于預設置信度閾值,則不進行沖突判斷,認為模型在該模態上不確定,直接標記為“低置信度”輸出;若各模態的最高置信度類別不同,則計算類別的語義相似度,若兩者語義接近,即小于設定的類別相似度閾值,則不判定為沖突;計算兩個模態最高類別的置信度差值,若高于設定的置信度差值閾值,則直接采用置信度較高的模態的預測結果,而不判定為沖突;總之,只有當以下條件同時滿足時,才真正判定沖突:預測類別不同、類別語義相似度低、兩個模態的置信度都高且置信度差值小; 優先級設定:沖突被檢測到后,根據模態表達的直接性設定優先級并動態調整權重; 多模態融合:將通過對齊網絡映射后的統一空間中的語音情感特征與圖像情感特征融合得到融合特征。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人廈門大學,其通訊地址為:361000 福建省廈門市思明南路422號;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。