OpenAI近期推出的視頻生成模型Sora在業(yè)界引發(fā)了廣泛關(guān)注，被視為視頻生成技術(shù)的一大飛躍。盡管Sora因其卓越的視頻穩(wěn)定性和清晰度而備受市場喜愛，但一些來自競爭對手的科學(xué)家卻對其持保留意見。盡管如此，仍有人對Sora寄予厚望，認(rèn)為它有可能成為人工智能領(lǐng)域的新高峰——世界模擬器，這也是OpenAI所追求的目標(biāo)。

OpenAI也在其官網(wǎng)文章中寄望，Sora絕不僅僅是個(gè)視頻生成器，而是一個(gè)現(xiàn)實(shí)世界的模擬器。通過學(xué)習(xí)和模擬數(shù)據(jù)分布，生成與真實(shí)世界相似的虛擬樣本，從而給現(xiàn)實(shí)世界提供預(yù)知信息。但這一前景被Meta的首席AI科學(xué)家Yann LeCun公開反駁，這位以直言不諱聞名的AI大佬直言：搞搞視頻就好，別吹有的沒的。

注定失敗的模擬器

LeCun在X上公開發(fā)文稱，通過生成像素來對世界進(jìn)行模擬是一種資源浪費(fèi)，且注定會(huì)失敗。而該貼也引發(fā)了極大關(guān)注，一眾網(wǎng)友在評論區(qū)華山論劍。簡單來說，LeCun認(rèn)為Sora模型試圖推斷太多不相關(guān)的細(xì)節(jié)，就像是通過試圖分析足球的材料來判斷足球的運(yùn)行軌跡。

他指出，生成式模型適用于文本內(nèi)容，因?yàn)槲谋臼请x散的，且是由數(shù)量有限的符號(hào)組成的數(shù)據(jù)，在這種情況下，處理預(yù)測中的不確定性變得十分容易。但如果換到以像素為單位的預(yù)測領(lǐng)域，不確定性就會(huì)變得非常棘手，且不可能成功。

底下的網(wǎng)友也紛紛發(fā)言，有人稱Sora雖然令人印象深刻，但幾乎每個(gè)場景都可能出現(xiàn)邏輯問題，比如藝術(shù)家測試視頻中三頭小狼莫名其妙分裂成五頭小狼。這讓模擬現(xiàn)實(shí)變得多少不太靠譜。

也有人說，Sora是應(yīng)夢想而生，人可以做清醒的夢，或者做不太清醒的夢。這種看起來不太清醒的發(fā)言則是賭Sora有那么一些可能實(shí)現(xiàn)OpenAI“世界模擬器”的壯言。

與此同時(shí)，LeCun所在的Meta上周發(fā)布了一個(gè)視頻聯(lián)合嵌入預(yù)測架構(gòu)V-JEPA，據(jù)稱其通過觀看視頻來教導(dǎo)大模型理解和對物理世界建模，算是Sora之外，對世界模擬器的另一種嘗試。

此外，V-JEPA還可以靈活丟棄不可預(yù)測的信息，而將訓(xùn)練和樣本運(yùn)行效率提升1.5-6倍。不過，V-JEPA顯然顯然沒在市場引發(fā)多大動(dòng)靜，相比Sora要低調(diào)很多。