復(fù)旦大學(xué)吳祖煊獲國家專利權(quán)
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監(jiān)控用IP管家,真方便!
龍圖騰網(wǎng)獲悉復(fù)旦大學(xué)申請的專利一種面向長視頻理解的采樣方法及系統(tǒng)獲國家發(fā)明授權(quán)專利權(quán),本發(fā)明授權(quán)專利權(quán)由國家知識產(chǎn)權(quán)局授予,授權(quán)公告號為:CN120388323B 。
龍圖騰網(wǎng)通過國家知識產(chǎn)權(quán)局官網(wǎng)在2025-08-26發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉:該發(fā)明授權(quán)的專利申請?zhí)?專利號為:202510873208.2,技術(shù)領(lǐng)域涉及:G06V20/40;該發(fā)明授權(quán)一種面向長視頻理解的采樣方法及系統(tǒng)是由吳祖煊;姜育剛;林星耀設(shè)計研發(fā)完成,并于2025-06-27向國家知識產(chǎn)權(quán)局提交的專利申請。
本一種面向長視頻理解的采樣方法及系統(tǒng)在說明書摘要公布了:本發(fā)明涉及計算機視覺領(lǐng)域,具體為一種面向長視頻理解的采樣方法及系統(tǒng),步驟包括:獲取長視頻及視頻字幕作為輸入,利用視頻大模型將長視頻分成多個語義一致的視頻片段;對于各個視頻片段通過視覺編碼器映射得到輸入序列,將輸入序列輸入視頻大語言模型中,生成視頻片段的文字總結(jié);對于視頻片段進行令牌采樣,計算視頻片段各幀之間的相對權(quán)重,并根據(jù)權(quán)重向每幀分配不同的令牌數(shù)量;將令牌采樣后的視頻幀的與文字總結(jié)輸入視頻大語言模型,基于視頻幀令牌與文字總結(jié)的匹配度,得到視頻片段的關(guān)鍵幀。與現(xiàn)有技術(shù)相比,本發(fā)明利用令牌采樣方法提高幀處理效率,解決現(xiàn)有長視頻理解方法中,多模態(tài)大模型顯存開銷和視頻信息完整性難以平衡的問題。
本發(fā)明授權(quán)一種面向長視頻理解的采樣方法及系統(tǒng)在權(quán)利要求書中公布了:1.一種面向長視頻理解的采樣方法,其特征在于,步驟包括: 獲取長視頻及視頻字幕作為輸入,利用視頻大模型將長視頻分成多個語義一致的視頻片段; 對于各個視頻片段通過視覺編碼器映射得到輸入序列,將輸入序列輸入視頻大語言模型中,生成視頻片段的文字總結(jié); 對于視頻片段進行令牌采樣,計算視頻片段各幀之間的相對權(quán)重,并根據(jù)權(quán)重向每幀分配不同的令牌數(shù)量;所述的相對權(quán)重具體為:對于所有幀的壓縮視覺令牌之間互相計算注意力權(quán)重,以某一幀的相對于其他所有幀的注意力權(quán)重之和作為該幀的最終權(quán)重; 將令牌采樣后的視頻幀與文字總結(jié)輸入視頻大語言模型,基于視頻幀令牌與文字總結(jié)的匹配度,得到視頻片段的關(guān)鍵幀。
如需購買、轉(zhuǎn)讓、實施、許可或投資類似專利技術(shù),可聯(lián)系本專利的申請人或?qū)@麢?quán)人復(fù)旦大學(xué),其通訊地址為:200433 上海市楊浦區(qū)邯鄲路220號;或者聯(lián)系龍圖騰網(wǎng)官方客服,聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。
1、本報告根據(jù)公開、合法渠道獲得相關(guān)數(shù)據(jù)和信息,力求客觀、公正,但并不保證數(shù)據(jù)的最終完整性和準確性。
2、報告中的分析和結(jié)論僅反映本公司于發(fā)布本報告當日的職業(yè)理解,僅供參考使用,不能作為本公司承擔任何法律責(zé)任的依據(jù)或者憑證。


熱門推薦
- 潘森納麗斯股份有限公司約翰·韋斯特獲國家專利權(quán)
- 蘇州高創(chuàng)特新能源發(fā)展股份有限公司張國良獲國家專利權(quán)
- 北京三快在線科技有限公司查瑩獲國家專利權(quán)
- 臺灣積體電路制造股份有限公司黃博祥獲國家專利權(quán)
- 納智源科技(唐山)有限責(zé)任公司崔婧獲國家專利權(quán)
- 深圳前海微眾銀行股份有限公司卓燕坤獲國家專利權(quán)
- 浙江養(yǎng)生堂天然藥物研究所有限公司魏雙萍獲國家專利權(quán)
- 朗姆研究公司丹尼爾·彼得獲國家專利權(quán)
- 深圳前海微眾銀行股份有限公司曾佳獲國家專利權(quán)
- 株式會社半導(dǎo)體能源研究所門馬洋平獲國家專利權(quán)