首頁 > 云計(jì)算頻道 > 大模型

Meta開源長視頻LLM項(xiàng)目LongVU:可過濾重復(fù)幀高效精準(zhǔn)理解長視頻內(nèi)容

2024年10月28日 17:27:40 來源：Citnews中文科技資訊

　　Meta AI團(tuán)隊(duì)推出了LongVU，一種新型的時(shí)空自適應(yīng)壓縮機(jī)制，旨在提升長視頻的語言理解能力。

　　該技術(shù)利用DINOv2特征剔除冗余幀，通過跨模態(tài)查詢實(shí)現(xiàn)特征選擇性壓縮，在各種視頻理解基準(zhǔn)測試中表現(xiàn)優(yōu)異，尤其在長視頻理解任務(wù)中超越其他方法。

　　長視頻內(nèi)容的快速增長需要更加高效的處理方式，LongVU的推出為多模態(tài)理解領(lǐng)域帶來新的可能性。

　　LongVU是一種新型的時(shí)空自適應(yīng)壓縮機(jī)制，旨在提升長視頻的語言理解能力。

　　該技術(shù)利用DINOv2特征剔除冗余幀，并通過跨模態(tài)查詢實(shí)現(xiàn)特征選擇性壓縮。

　　LongVU在各種視頻理解基準(zhǔn)測試中表現(xiàn)優(yōu)異，尤其在長視頻理解任務(wù)中，超越了其他方法。

　　文章內(nèi)容僅供閱讀，不構(gòu)成投資建議，請謹(jǐn)慎對待。投資者據(jù)此操作，風(fēng)險(xiǎn)自擔(dān)。

[No. ]
分享到微信

即時(shí)

再進(jìn)化！特斯拉擎天柱能自主充電自主干活

特斯拉最近發(fā)布了一段視頻，展示了其人形機(jī)器人Optimus(擎天柱)的新功能和進(jìn)展，試圖回應(yīng)外界對其智能水平的質(zhì)疑。

一加13 搭載超大容量冰川電池及雙閃充組合，續(xù)航體驗(yàn)超 P

一 13搭載第二代東方屏，打造四大巔峰屏幕體驗(yàn)

新聞

敢闖技術(shù)無人區(qū) TCL實(shí)業(yè)斬獲多項(xiàng)AWE 2024艾普蘭獎(jiǎng)

近日，中國家電及消費(fèi)電子博覽會(huì)(AWE 2024)隆重開幕。全球領(lǐng)先的智能終端企業(yè)TCL實(shí)業(yè)攜多款創(chuàng)新技術(shù)和新品亮相，以敢為精神勇闖技術(shù)無人區(qū)，斬獲四項(xiàng)AWE 2024艾普蘭大獎(jiǎng)。

企業(yè)IT

重慶創(chuàng)新公積金應(yīng)用，“區(qū)塊鏈+政務(wù)服務(wù)”顯成效

“以前都要去窗口辦，一套流程下來都要半個(gè)月了，現(xiàn)在方便多了!”打開“重慶公積金”微信小程序，按照提示流程提交相關(guān)材料，僅幾秒鐘，重慶市民曾某的賬戶就打進(jìn)了21600元。

3C消費(fèi)

“純臻4K 視界煥新”——愛普生4K 3LCD 激光工程投影

2024年3月12日，由愛普生舉辦的主題為“純臻4K 視界煥新”新品發(fā)布會(huì)在上海盛大舉行。

由世界人工智能大會(huì)組委會(huì)、上海市經(jīng)信委、徐匯區(qū)政府、臨港新片區(qū)管委會(huì)共同指導(dǎo)，由上海市人工智能行業(yè)協(xié)會(huì)聯(lián)合上海人工智能實(shí)驗(yàn)室、上海臨港經(jīng)濟(jì)發(fā)展(集團(tuán))有限公司、開放原子開源基金會(huì)主辦的“2024全球開發(fā)者先鋒大會(huì)”，將于2024年3月23日至24日舉辦。