買專利賣專利找龍圖騰，真高效！ 查專利查商標用IPTOP,全免費！專利年費監控用IP管家,真方便！

龍圖騰網獲悉北京火山引擎科技有限公司申請的專利大模型評估的方法、裝置、電子設備和計算機程序產品獲國家發明授權專利權，本發明授權專利權由國家知識產權局授予，授權公告號為：CN119025484B 。

龍圖騰網通過國家知識產權局官網在2025-08-22發布的發明授權授權公告中獲悉：該發明授權的專利申請號/專利號為：202411124729.X，技術領域涉及：G06F16/14；該發明授權大模型評估的方法、裝置、電子設備和計算機程序產品是由廖敏;張洋;付堯;孟嘉霖;劉武利;張曉亮;劉柏纓設計研發完成，并于2024-08-15向國家知識產權局提交的專利申請。

本大模型評估的方法、裝置、電子設備和計算機程序產品在說明書摘要公布了：本公開的實施例涉及大模型評估的方法、裝置、電子設備和計算機程序產品，用于大模型領域。該方法包括基于指示從多個評估策略中選擇用于評估目標模型的評估策略的用戶輸入，發送用于執行所選擇的評估策略的請求。此外，該方法還包括獲取請求的執行結果，執行結果至少包括目標模型的評估結果。通過本公開的實施例，能夠高效地完成模型評估，提高評估效率，縮短模型的開發周期，加快模型的迭代，并且還能夠降低開發模型評估任務的難度，使更多用戶能夠參與模型的評估過程。

本發明授權大模型評估的方法、裝置、電子設備和計算機程序產品在權利要求書中公布了：1.一種大模型評估的方法，包括： 基于指示從多個評估策略中選擇用于評估目標模型的評估策略的用戶輸入，發送用于執行所選擇的所述評估策略的請求，所述評估策略包括運行策略和多個評分策略，所述多個評估策略被發布在策略系統上，所述策略系統被配置為： 創建所述評估策略的策略文件，所述策略文件被保存在數據庫中，并且所述策略文件基于所述策略系統提供的工具包而被生成，所述工具包支持數據集管理、環境變量調用、元數據獲取中的一項或者多項； 通過設置用于執行所述評估策略所需的依賴項來生成依賴文件，所述依賴文件被讀取以安裝依賴包； 通過將所述策略文件、所述工具包、所述依賴文件、策略服務的配置文件以及所述策略服務的入口函數進行打包作為發布文件來將所述評估策略發布到所述策略系統中的所述策略服務，所述策略服務為函數即服務FaaS； 響應于接收到所述用于執行所述評估策略的所述請求，通過執行所述FaaS的所述入口函數來將所述請求分發到選定的所述運行策略； 執行所述運行策略來確定所述目標模型的模型輸出； 對所述目標模型的所述模型輸出執行所述多個評分策略，確定所述請求的多個執行結果；以及 獲取所述請求的所述多個執行結果，所述多個執行結果至少包括所述目標模型的多個評估結果。

如需購買、轉讓、實施、許可或投資類似專利技術，可聯系本專利的申請人或專利權人北京火山引擎科技有限公司，其通訊地址為：100190 北京市海淀區紫金數碼園4號樓13層1309；或者聯系龍圖騰網官方客服，聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。