上海人工智能創新中心張文蔚獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網獲悉上海人工智能創新中心申請的專利一種細粒度的大語言模型幻覺檢測方法、設備、存儲介質獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN118364065B 。
龍圖騰網通過國家知識產權局官網在2025-08-22發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202410316997.5,技術領域涉及:G06F16/3329;該發明授權一種細粒度的大語言模型幻覺檢測方法、設備、存儲介質是由張文蔚;季紫薇;顧宇喆;呂成器;林達華;陳愷設計研發完成,并于2024-03-20向國家知識產權局提交的專利申請。
本一種細粒度的大語言模型幻覺檢測方法、設備、存儲介質在說明書摘要公布了:本發明涉及一種細粒度的大語言模型幻覺檢測方法、設備、存儲介質,方法包括:基于幻覺檢測訓練數據對幻覺檢測模型進行訓練,基于訓練后幻覺檢測模型對目標大語言模型的答復進行幻覺檢測,其中,所述幻覺檢測訓練數據的獲取過程包括如下步驟:獲取主題數據,通過檢索得到對應的參考文獻數據;基于所述參考文獻數據,使用不同于所述目標大語言模型的語言模型生成多個問題數據并對問題數據進行篩選;將篩選后的問題數據輸入語言模型中,得到對應的答復數據,通過以句子為單位進行細粒度的標注,形成幻覺檢測訓練數據。與現有技術相比,本發明具有檢測能力強、準確性高等優點。
本發明授權一種細粒度的大語言模型幻覺檢測方法、設備、存儲介質在權利要求書中公布了:1.一種細粒度的大語言模型幻覺檢測方法,其特征在于,基于幻覺檢測訓練數據對幻覺檢測模型進行訓練,基于訓練后幻覺檢測模型對目標大語言模型的答復進行幻覺檢測,其中,所述幻覺檢測訓練數據的獲取過程包括如下步驟: 獲取主題數據,通過檢索得到對應的參考文獻數據; 基于所述參考文獻數據,使用不同于所述目標大語言模型的語言模型生成多個問題數據并對問題數據進行篩選; 將篩選后的問題數據輸入語言模型中,得到對應的答復數據; 針對所述答復數據,通過以句子為單位進行細粒度的標注,形成幻覺檢測訓練數據, 其中,以InternLM系列作為基座大語言模型進行訓練,得到幻覺檢測器,分別采用兩種訓練范式進行訓練: 使用語言模型的范式進行訓練,通過提示詞構造,使用語言對話的方式令模型進行幻覺判斷; 使用分類模型的范式進行訓練,將語言模型的最后一層替換為一個線性分類層,在輸入問題和回復后,模型直接幻覺類型的判定, 其中,通過檢索得到對應的參考文獻數據的過程包括: 對條目進行精確匹配,然后,根據句子語義的相似性對候選詞條進行排序,使用InternLM對其進行判斷,從而選出詞條,在判斷時,從兩個方面進行判斷,一個是該詞條是獨一無二還是存在某些近義詞,另一個是該詞條是否著名或重要,保證選擇的詞條是獨特且重要的, 其中,生成問題數據的過程包括: 使用GPT4重新生成問題,生成完問題后,再次使用GPT4,以真實性、可回答性、難度和多樣性指標對問題進行挑選,得到最終的高質量問題, 其中,進行細粒度的標注的過程包括: 若句子包含事實信息且與參考信息一致,則其類型為無幻覺,指出原始文件中的具體參考片段; 如果句子與參考文獻相矛盾,則其類型為矛盾的幻覺,提供具體的參考文獻片段和更正建議; 如果句子缺乏支持性證據且無法核實,則其類型為無法驗證的幻覺,提出修改建議; 如果該句子不包含任何可供評估的事實信息,則屬于無事實類別。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人上海人工智能創新中心,其通訊地址為:200232 上海市徐匯區云錦路701號37、38層;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。