宅中地 - 每日更新
宅中地 - 每日更新

贊助商廣告

X

我們能不能擋住AI生成的災難影片

2026年08月24日 首頁 » 熱門科技

2026年初,如果你在社交媒體上刷到一段戰場畫面,一段空難現場,或者一段疫情封城的街景影片,你會不會毫不猶豫地相信它是真的?

這不是一個假設性的問題。就在幾個月前,AI影片生成模型已經進化到能夠僅憑一張照片就生成一段幾秒鐘的動態影片,畫面里的煙霧會飄散,火光會跳動,人群會走動,連鏡頭的抖動感都做得以假亂真。研究者們把一堆真實的災難影片和AI生成的對應版本放在一起做了個小測試,讓人猜哪個是真的哪個是假的。結果很多人都猜錯了。

這篇論文的題目直白得讓人心裡一緊,我們真的能防住AI生成的影片攻擊現實世界危機事件嗎。答案不算樂觀,一群來自新加坡國立大學、加州大學伯克利分校、香港科技大學等十幾所機構的研究者們聯合做了一次相當徹底的調查,他們造了一個專門的測試集,把市面上能找到的檢測方法幾乎都拉出來溜了一遍,結果發現,沒有一種方法能穩定地識別出這些偽造影片。這篇文章想把這件事講清楚,講清楚問題出在哪,講清楚為什麼這件事比想像中難得多。

問題到底難在哪

先說一個背景。過去幾年,關於"怎麼檢測AI生成的影片"這個課題,學術界已經發表了不少研究,也造了不少測試集,比如GVF、GenVideo、GenVidBench這些。這些測試集通常的做法是,從網上隨便扒一批影片,比如做飯的、跳舞的、風景的,然後用生成模型造出對應的假影片,拿去訓練和測試檢測器。

問題是,這些測試集裡幾乎沒有專門針對"真實世界危機事件"的內容。戰爭、災難、公共衛生突發事件,這些恰恰是最容易被拿來做謠言的題材,因為它們天然帶有情緒衝擊力,容易在社交媒體上瘋狂轉發。可現有的測試集偏偏沒怎麼覆蓋這塊。

這就好比你要測試一個門鎖的防盜能力,但測試的時候只拿普通的鑰匙去試,沒試過專業撬鎖工具。鎖看起來很結實,可一旦真正的竊賊上門,後果完全是另一回事。危機事件影片和普通影片的生成難度、傳播路徑、造假動機都不一樣,拿普通影片測出來的檢測器性能,不能簡單地套用到危機場景里。

於是研究團隊決定自己動手,造一個專門針對這類場景的測試集,他們管它叫RA-Bench。

> **RA-Bench**:Real videos as Anchors的縮寫,意思是"以真實影片作為錨點"的基準測試集,專門用來評估AI生成影片檢測器在真實危機事件場景下的表現。

這個名字本身就透露了設計思路,不是簡單地堆一堆真影片和假影片,而是讓每一個真實影片都成為一個"錨",生成模型圍繞這個錨去偽造對應的假影片,這樣真假配對更加緊密,測試也更有針對性。

RA-Bench是怎麼造出來的

整個數據集的構建過程分成五個階段,挺講究的,我們一步步看。

第一步是收集真實素材。研究團隊從政府機構、公共媒體資源庫、新聞平台這些渠道,收集了675段描繪真實世界危機和重大社會事件的影片。這些影片被歸到10個大類,44個細分小類里,大類包括天氣自然災害、戰爭衝突、政治治理、公共安全、事故基建故障、經濟社會恐慌、公共衛生、科技、太空探索我們能不能擋住AI生成的災難影片,以及大型公共活動。

值得說一句的是,他們沒有強行給每個類別設定相同的配額。因為如果人為地讓每個類別數量均等,反而會扭曲現實中這些危機事件的自然分布比例,讓測試結果脫離真實的部署場景。這就像做民意調查的時候,你不能為了湊數據好看就人為地把各個年齡段的樣本數拉平,現實世界裡人口結構本來就是不均勻的,硬拉平反而失真。

第二步是自動預處理。675段原始影片被用場景切割工具切成了5774個可審核的短片段。因為相鄰的鏡頭往往內容重複度很高,團隊還專門用一個預訓練的圖像識別網路做了近重複片段的初篩,把可能重複的片段標記出來,交給後續人工審核。

> **PySceneDetect**:一個開源的影片場景切割工具,能夠檢測影片中的鏡頭切換點,把長影片自動分割成一個個獨立的短片段。

第三步是人工審核,而且是兩輪審核。第一輪由七名志願者對5774個片段逐一評估,標準包括畫面質量、是否符合分類主題、時長是否合適、是否重複、是否涉及隱私風險等等。每個片段由兩名審核員獨立判斷,給出保留、拒絕或者不確定三種意見。如果兩人意見不一致,或者有人標了不確定,這個片段就會被送到第二輪,由另外四名審核員做最終裁決。

這套流程聽起來繁瑣,但背後的邏輯很實在。一個片段到底該不該被收進測試集,這個判斷本身帶有主觀性,一個人可能覺得畫質夠用,另一個人可能覺得不夠,兩輪審核加交叉驗證,是為了儘量把主觀誤差磨平,讓最終留下來的樣本質量有個基本保障。這有點像法庭審判要有陪審團而不是一個法官說了算,不是因為一個人一定會犯錯,而是多人交叉判斷能顯著降低系統性偏差。

經過這兩輪審核,5774個片段里有2426個被保留下來。

第四步是後處理。團隊把這2426個片段的時長統一規整到3到15秒之間,太短的直接捨棄,太長的截斷。然後統一用H.264編碼格式重新編碼,這一步很關鍵,因為如果真實影片和生成影片用不同的編碼格式,檢測器很可能偷懶去學編碼格式的差異,而不是真正學會識別內容本身的真假,這樣測出來的準確率就是虛高的假象。

接著團隊還做了同質化剪枝,去除來自同一個影片源里過於重複的片段,並對每個影片源的版權授權情況做了核實登記。經過這一系列操作,最終留下1830個片段,來自338個不同的影片來源,總時長大約5.1小時,平均每個片段10.08秒。

第五步,也是整個流程里最有意思的一步,是配對生成假影片。

用真實的第一幀去騙AI造假

這一步的設計思路,是整篇論文裡我覺得最值得細講的地方。

團隊沒有隨便找個提示詞就讓AI生成影片,而是先用Gemini-3.1-Pro-Preview這個大模型,給每一段真實影片生成一段結構化的詳細描述,包括畫面主體、背景、鏡頭運動方式、拍攝風格、動作過程等等。然後再把這段描述轉換成一句通用的英文生成提示詞,這句提示詞會被原封不動地發給所有參與測試的生成模型。

> **I2V**:Image-to-Video的縮寫,指的是圖像到影片的生成方式,也就是給AI一張靜態圖片和一段文字描述,讓它生成一段動態影片,影片的第一幀通常就是那張輸入圖片。

關鍵的設計是,每個生成模型除了拿到這句提示詞,還會拿到真實影片的第一幀畫面作為條件輸入。這意味著生成出來的假影片,開頭那一幀和真實影片一模一樣,後面的內容才是AI憑空編出來的。

這個設計模擬的是一個非常現實的造謠場景。想像一下,有人拍到了一張真實的火災現場照片,這張照片是真的,沒有任何疑點,但如果有人拿這張照片去餵給AI影片生成工具,讓它續寫接下來發生的事,比如火勢蔓延、建築坍塌、人群逃散,生成出來的影片前幾幀和真實照片完全吻合,後面的內容卻是徹底編造的。這種造假方式比憑空生成一整段影片要陰險得多,因為它有一個真實的錨點作為信任背書,觀眾看到開頭是真的,很容易默認整段影片都是真的。

如果不這樣設計會怎樣。如果生成的影片完全脫離真實素材,只是根據文字描述憑空生成,那麼這段假影片和真實世界的關聯性會弱很多,傳播時也更容易被識破,因為它缺少一個可以讓人產生初始信任的錨點。真正危險的造假手法,恰恰是這種嫁接式的,拿一部分真實證據去撐起一整段虛構內容的騙局,就像偽造文件時最狡猾的做法不是從頭到尾全部編造,而是拿一份真實的官方文件蓋章頁去嫁接一份編造的正文,真章假文,才最容易騙過審查。

生成影片的時長也做了精心設計,團隊讓生成時長與對應真實片段的時長成正比,同時限制在2到8秒的範圍內,這樣能防止檢測模型偷懶學到"時長固定就是假的"這種捷徑式判斷規則。

最終,團隊用了四個開源生成模型和五個閉源商業生成模型(比如Kling、Runway、Seedance2.0、Hailuo這些市面上知名的產品),一共生成了16056段假影片。加上1830段真實片段,整個RA-Bench測試集總共有17886段影片。

檢測器到底靠不可靠

數據集造好了,接下來就是重頭戲,拿現有的檢測方法去跑一遍,看看效果如何。

研究團隊把檢測方法分成三大類,分別測試。

第一類是傳統檢測器,一共測了七種,包括CNNSpot、NPR、UnivFD、ForgeLens這些針對圖像層面偽造痕跡的檢測方法,以及DeCoF、D3、ReStraV這些專門針對影片時序資訊的檢測方法。

> **AUC**:Area Under Curve的縮寫,是評估分類器性能的常用指標,數值範圍從0到100%,50%代表和隨機猜測差不多,數值越高說明檢測器區分真假的能力越強。

結果非常打臉。這七種檢測器在公開的參考數據集上,AUC分數普遍在67.6%到98.6%之間,聽起來挺唬人。但把它們放到RA-Bench上一測,分數直接跌到43.9%到57.3%,有26個檢測器與生成源的組合,AUC甚至低於50%,這意味著這些檢測器給假影片打的"造假概率分"比給真影片打的還低,相當於反著來都比它准。

更麻煩的是排名的崩塌。原本在公開測試集上排名第二的UnivFD,在RA-Bench上掉到了第六;原本排名墊底的NPR,反而爬到了第三。這不是簡單的整體性能下降,而是整個排位洗牌了。這就像一群運動員在熟悉的主場比賽拿了好名次,換到一個陌生的客場比賽,不僅成績普遍變差,連原本的名次順序都亂了套,說明他們的實力評估本身就是有偏差的,只是特別適應主場環境而已。

第二類是零樣本多模態大模型我們能不能擋住AI生成的災難影片,團隊測了包括Qwen3.5系列、Qwen3.7-Plus、Gemini-3.1-Pro-Preview、GPT-5.5在內的十種模型,用了三種不同的提問方式。

> **零樣本**:指模型沒有經過針對這個具體任務的專門訓練,直接靠通用能力去完成任務,這裡指的是沒有專門訓練過識別AI生成影片的大模型,直接靠常識去判斷真假。

結果顯示,即便是表現最好的Gemini-3.1-Pro-Preview,整體的BAcc(平衡準確率)也只有63%左右,而且這個數字在不同生成源上波動很大,在LTX這個生成源上能達到74.5%,但在Seedance2.0上只有54.3%,相差整整20個百分點。

更奇怪的現象是,同一個模型,換一種提問方式,判斷傾向會完全反轉。比如Qwen3.5-0.8B這個模型,用二選一的簡單問法時,只把19.7%的假影片判定為假,但換成讓它評分診斷的問法,這個比例一下子飆升到97.8%,再換成連續評分的問法,幾乎100%都判成假的。同一個視覺輸入,同一個判斷任務,僅僅因為提問的措辭不同,結果就能天差地別。

這說明什麼。說明很多模型其實沒有真正學會"辨別真假"這件事,它們學到的更像是"在某種提問句式下,該給出什麼樣的回答傾向"。這就好比考試的時候,有的學生不是真正理解了知識點,而是摸清了出題老師的出題習慣,老師喜歡考選擇題他就能蒙對,換成簡答題立刻露餡。表面上看兩次都是同一個學生在考同一個知識點,但實際上他考察的根本不是知識本身,是對題型的適應。

第三類是專門針對AI生成影片檢測微調過的大模型,測試了Skyra-SFT、Skyra-RL和BusterX++這三個系統。

> **微調**:指在通用大模型的基礎上,用針對性的數據繼續訓練,讓模型專門擅長某個具體任務,這裡是專門用AI生成影片檢測數據訓練過的模型。

這一部分的發現相當耐人尋味。Skyra系列模型在官方推薦的使用方式下,表現看起來相當不錯,平均BAcc能到68.5%到69.5%。但研究團隊做了一個很聰明的對照實驗,他們發現Skyra模型接收影片幀的時候,每一幀上都會帶一個絕對時間戳標籤,而這個時間戳里藏著一個巨大的漏洞,官方訓練數據里,凡是影片最後一幀時間戳恰好是5.00秒的,有超過一半的概率是假影片,而在另一個基準測試集裡,這個比例甚至高達99.9%。

也就是說,模型可能壓根沒有認真去看影片內容,它學會了一個投機取巧的規律,只要看到最後一幀標著5.00秒,就傾向於判斷這是假的。研究團隊做了個簡單的實驗來驗證這個猜測,把絕對時間戳換成純粹的幀序號標籤(比如"第1幀""第2幀"),視覺內容完全不變,只是去掉了具體的秒數資訊。結果模型的平均BAcc直接從68.5%掉到54.4%,幾乎跌回隨機蒙的水平。

這個發現讓我想起了一個經典的機器學習笑話式案例,曾經有個模型號稱能從X光片裡識別病情嚴重程度,後來發現它其實是在學習照片裡醫院設備型號的差異,因為病情嚴重的病人更可能被轉診到設備更先進的醫院拍片,模型學的根本不是醫學特徵,是設備銘牌。如果不做這種反事實驗證,你永遠不知道模型學到的到底是真本事還是投機取巧的捷徑,而這種捷徑在真實世界的實戰場景里往往完全失效,因為造假者根本不會按照訓練數據里那種巧合的時間戳規律去生成影片。

BusterX++這個模型則表現出另一種問題,它幾乎對所有影片都傾向於判斷為真,在九個生成源上,它把假影片正確識別出來的比例只有4.1%到9.1%,卻把93%以上的真影片判斷對了。這不是它擅長分辨真假,而是它學會了一個偷懶策略,無腦說"這是真的",在真實影片占多數的場景里,這樣蒙也能拿到不錯的整體準確率,但對於檢測系統來說,這恰恰是最危險的失效模式,因為它意味著幾乎所有的假影片都會被放過。

什麼樣的影片更難被識破

除了測試檢測器本身的表現,團隊還深入分析了,到底是什麼因素讓某些生成影片特別難被識別。

他們用了一套叫VBench++的評測工具,給所有16056段生成影片評分,評估維度包括畫面質量、動作流暢度、與原始條件圖片的一致性等等。

> **條件保真度**:指生成影片的畫面內容和用來生成它的那張初始圖片之間的一致程度,一致性越高,說明生成的影片越貼近真實素材的視覺風格。

分析發現,條件保真度和時序一致性越高的影片,越難被Gemini這樣的多模態大模型識破,一個條件保真度提升50個點的影片,能讓Gemini的診斷式判斷里假影片識別率下降14.4個百分點。這個道理很直白,如果生成的影片畫面風格、光影、材質都和真實素材高度吻合,那麼留給檢測器抓辮子的破綻自然就少了。

但有意思的是,傳統檢測器對這套邏輯並不買賬。傳統檢測器的平均表現受動態內容的影響幾乎為零,反而是畫面質量分數和主體一致性這些指標對它的影響更大。這說明不同的檢測器家族,壓根不是在看同一件事,Gemini這類大模型可能更關注畫面是否"看起來像真實拍攝",而傳統檢測器可能在捕捉一些更底層的像素級統計特徵。

另一個關鍵發現和條件輸入的"真實成分"有關。團隊用同一批1830個提示詞,分別測試了純文字生成影片、只用第一幀真實圖片作為條件的生成影片,以及同時用第一幀和最後一幀真實圖片作為條件的生成影片。結果顯示,給的真實條件越多,微調過的檢測大模型就越容易把它誤判成真影片,從純文字生成到只用首幀條件,微調模型的平均假影片識別率從70.5%驟降到42.7%,再加上尾幀條件後,進一步跌到28.3%。

這個結果其實揭示了一個挺讓人擔憂的矛盾。造假者提供的真實素材越多,偽造的影片反而越難被抓,這意味著那種"拿一張真實照片去嫁接AI續寫內容"的造假手法,恰恰是最難防的一種,因為它天然占據了更多"看起來真"的優勢。而傳統檢測器對這個維度不太敏感,變化方向甚至不統一,有的檢測器分數升高,有的降低,沒有一致的規律。

值得一提的是,研究團隊還專門測試了改變生成時用的隨機種子會不會影響檢測結果,答案是不會,換三個不同的隨機種子,檢測器的表現只會有極小幅度的波動,這說明前面發現的種種規律,不是某次生成運氣好或運氣差造成的偶然現象,而是相對穩定的系統性規律。

人也會被騙

技術層面聊得差不多了,我們再看看人類自己的表現如何。

研究團隊組織了20名審核員,對RA-Bench里的影片做真假判斷,每段影片三選一,標註為真、不確定或者假,而且審核過程中真假影片是隨機混排的,審核員完全不知道當前看的影片來自哪個生成模型。

結果顯示,審核員平均能把60.3%的假影片判斷為假,聽起來還湊合,但拆開來看差異巨大。開源生成模型造出來的假影片,審核員平均能識破68.6%,而閉源商業生成模型造出來的假影片,識破率只有52.9%,其中Seedance2.0和Kling這兩個模型生成的影片最難被識破,識破率只有40.7%和45.1%。

更值得警惕的是,真實影片也有22.8%的判斷被誤標為假的。也就是說,真實拍攝的危機事件畫面,有超過五分之一的概率被人當成AI造假,這對新聞傳播和公眾信任是一個相當致命的問題。

基於這個發現,團隊做了一個更狠的篩選,他們找出了那些被三名審核員全部誤判為真的假影片,一共1080段,再讓另外兩名獨立審核員覆審一遍,只有同時被這兩名審核員也判斷為真的影片才會留下來,最終留下633段,這些影片形成了一個專門的挑戰集,叫做RA-Bench-HumanProof。

> **RA-Bench-HumanProof**:從RA-Bench里篩選出的一個子集,包含633段AI生成的影片,這些影片被五名不同的獨立審核員全部誤判為真實影片,用來專門測試檢測器在人類都識破不了的情況下能否發揮作用。

這個名字翻譯過來大概是"人類過濾剩下的難題",意思是這些影片已經騙過了所有人類審核員,接下來看看AI檢測器能不能力挽狂瀾。

結果相當不理想。在這633段人類都判斷錯誤的影片上,Gemini的兩種判斷方式的BAcc都只有54%左右,幾乎和隨機猜測沒什麼區別,七個傳統檢測器的平均AUC只有47.5%,同樣接近隨機水平。就連那個之前依賴時間戳漏洞的Skyra模型,去掉時間戳漏洞之後也只剩53.7%的BAcc,BusterX++更是只識別出了3.9%的假影片。

這個結果意味著,那些能騙過人眼的假影片,同樣也能騙過現有的檢測器,人類的失誤和機器的失誤發生在同一批影片上,這個重疊恰恰是最危險的地帶,這些影片一旦流出,不管是靠人工審核還是靠自動化檢測系統,都攔不住。

影片在傳播路徑上會怎樣變化

最後一個實驗環節,研究團隊考慮了一個更貼近現實的問題,影片在社交媒體傳播過程中,通常不會保持原始的高清標準格式,而是會經歷壓縮、轉碼、加水印、降低幀率這些處理,那檢測器在這種"降質"之後表現會怎樣?

為此他們專門造了一個模擬社交傳播鏈路的測試環境,叫做RA-Bench-LastMile,涵蓋150個真實事件錨點和對應的九個生成源影片,模擬的處理步驟包括常見的VP9轉H.264格式轉碼、畫面尺寸減半的降採樣、幀率降到8幀每秒,以及加上一個仿真的新聞台標水印。

> **VP9轉H.264**:這是兩種不同的影片壓縮編碼標準,VP9常用於網路流媒體,H.264是更通用的傳輸格式,社交媒體平台在處理用戶上傳的影片時經常需要做這種格式轉換。

結果顯示,傳統檢測器的平均AUC從原始狀態的51.4%降到全套處理後的47.3%,降幅看起來不算太大,但檢測器的排名徹底洗牌了,原始狀態和全套處理後的排名相關性只有0.07,幾乎等於重新洗牌。

而微調過的檢測大模型受到的衝擊要嚴重得多。五種微調配置的平均假影片識別率,從原始狀態的46.0%,一路跌到全套處理後的僅僅1.4%。這個數字意味著什麼,意味著如果一段生成的假影片經過了社交媒體常見的壓縮傳播鏈路,幾乎所有這些檢測大模型都會把它誤判為真實影片。

拆解開來看,畫面降採樣這一步的影響最大,單獨這一項就能讓平均假影片識別率從29.9%驟降到7.9%。降低幀率的影響則表現出和之前一樣的模式,對依賴絕對時間戳的Skyra配置影響特別大,BAcc下降11.7到12.9個百分點,而去掉時間戳依賴的對照版本只下降2.4到3.4個百分點,進一步印證了這些模型對時間資訊的過度依賴。

加水印這個操作單獨看也很有意思,儘管畫面內容本身完全沒變,只是右上角多了一個模擬新聞台標,但這個改動讓假影片識別率從29.9%降到14.0%,同時讓真影片識別率從79.1%升到88.5%。這說明模型在某種程度上把"帶新聞台標"這個表面特徵和"這是真新聞"劃上了等號,這恰恰是造假者最容易利用的漏洞,因為偽造一個新聞台標的成本幾乎為零。

表格里的關鍵數字

我們把前面講的核心數據整理一下,方便對照:

傳統檢測器在公開參考數據集上的AUC區間是67.6%到98.6%,而在RA-Bench上跌到43.9%到57.3%,這是全篇最扎眼的數字對比。

微調過的檢測大模型,把時間戳換成幀序號後,BAcc只剩54.4%到54.9%,而BusterX++的假影片識別率只有4.1%到9.1%。

人類審核員對開源生成模型的假影片識破率是68.6%,對閉源商業模型的假影片識破率是52.9%,其中Seedance2.0最難識破,只有40.7%。

在RA-Bench-HumanProof這批人類都判斷失誤的挑戰影片上,Gemini的BAcc只有54.7%和54.5%,七個傳統檢測器的平均AUC是47.5%。

在模擬社交傳播的完整處理鏈路下,微調大模型的平均假影片識別率從46.0%驟降到1.4%,幾乎全部失效。

這些數字連起來看,勾勒出的是一個相當悲觀的結論,現有的檢測手段,不管是老派的圖像特徵分析,還是新潮的多模態大模型,都沒有做好準備去應對真正逼真、真正經過精心設計、並且經過傳播鏈路處理的AI生成危機影片。

那接下來怎麼辦

論文的作者們沒有停留在指出問題上,他們提出了幾個值得關注的方向。

一個思路是不要指望單一檢測器包打天下,而是把多個檢測器和取證工具組合起來,做成一種模組化或者智能體式的協作系統,讓不同的檢測手段互相印證、互相補足各自的盲區。

另一個思路是把重心放在提升多模態大模型的可解釋性上,現在這些模型給出的判斷理由本身可信度還有待驗證,得先建立起評估這些"解釋"是否可靠的基準,才能進一步用它來指導檢測系統的設計。

還有一個挺有意思的方向叫主動水印。

> **主動水印**:在影片生成的過程中,主動嵌入一些人眼看不見但機器可識別的標記信號,這樣後續檢測的時候不需要靠分析畫面內容去猜測真假,而是直接檢測這個嵌入的標記是否存在。

這個思路的邏輯是,與其被動地去猜一段影片是不是AI生成的,不如讓生成模型在造出影片的那一刻就主動打上一個隱藏標記,這樣後續檢測直接掃描這個標記就行,不用再和造假者玩貓鼠遊戲。這有點像紙幣上的防偽水印,與其讓售貨員練就火眼金睛去辨認假鈔的紙質和印刷細節,不如從造幣廠那一步就嵌入一個專業設備才能識別的防偽特徵,這樣識別的可靠性和效率都會高得多。

論文裡還提到,隨著像Seedance2.0這樣的模型開始原生生成帶音頻同步的影片內容,未來的檢測研究恐怕也得從純視覺擴展到音影片聯合分析,單靠畫面已經不夠了。

寫在後面

讀完這篇論文,最讓我意外的一點是,那個關於時間戳的發現。一個專門為了檢測AI生成影片而訓練的大模型,竟然在悄悄利用訓練數據里一個和內容真假毫無關係的巧合規律,只因為最後一幀標著5.00秒就傾向於判假。這個細節讓我重新想了一遍,任何一個看起來準確率很高的AI系統,如果沒有人專門去做這種反事實的拆解實驗,你根本不知道它學到的是真本事還是一個隱藏的投機取巧的捷徑。這個套路其實到處都是,只是很少有人願意花這個功夫去驗證。

另一個讓我一直琢磨的地方是,給的真實素材越多,生成的假影片反而越難被識破,這個規律聽起來有點反常識。我們通常會覺得,造假嫁接的真實成分越多,應該越容易在細節上露餡才對,但實驗數據恰恰相反。這可能說明,現在的檢測方法本質上還是在找"AI生成痕跡",而不是在驗證"這段內容有沒有事實依據",這兩件事聽起來接近,其實是完全不同的兩套邏輯,前者關心的是像素統計規律,後者關心的是敘事的真實性,而現在幾乎所有檢測器做的都是前者。

這篇論文沒有解決的問題,恰恰是它自己在文章末尾也承認的,現實里的造假往往不只是單純的影片生成,還會疊加剪輯拼貼、偽造字幕、編造上下文這些多層手法,這篇論文測的是每個環節單獨拿出來的效果,真實世界的造假流程會不會把這些環節串起來產生更強的疊加效應?這個問題目前還沒人給出答案。

Q&A

Q1:RA-Bench是什麼?

A:RA-Bench是一個專門用來評估AI生成影片檢測能力的基準測試集,包含1830個真實世界危機事件影片和16056個AI生成的對應假影片,涵蓋戰爭、自然災害、公共衛生等10個社會風險類別,是目前首個專門針對真實危機事件場景設計的檢評測估數據集。

Q2:現有的AI生成影片檢測器為什麼在RA-Bench上表現這麼差?

A:因為這些檢測器大多是在普通生活場景影片上訓練和測試的,沒有見過針對真實危機事件的精心偽造影片。測試結果顯示,傳統檢測器的準確率從公開參考數據集的67.6%到98.6%,跌到RA-Bench上的43.9%到57.3%,而且不同檢測器之間的排名也大幅變化,說明它們並沒有學到真正通用的辨別真假的能力。

Q3:什麼是RA-Bench-HumanProof,為什麼它特別重要?

A:RA-Bench-HumanProof是從RA-Bench里篩選出的633段影片,這些影片被五名獨立審核員全部誤判為真實影片。在這批影片上,現有檢測器的表現也幾乎接近隨機猜測,說明能騙過人眼的假影片,同樣能騙過AI檢測系統,這個重疊是當前AI生成影片防禦體系里最危險的盲區。

宅中地 - Facebook 分享 宅中地 - Twitter 分享 宅中地 - Whatsapp 分享 宅中地 - Line 分享
相關內容
Copyright ©2026 | 服務條款 | DMCA | 聯絡我們
宅中地 - 每日更新