智東西(公眾號:zhidxcom)
作者 | 李水青
編輯 | 心緣

當下,各路生成式AI工具落地如火如荼。

據(jù)全球知名數(shù)據(jù)機構SimilarWeb統(tǒng)計,2024年9月,穩(wěn)居全球第一的ChatGPT網(wǎng)站月訪問量環(huán)比增長18.71%,達到31.24億次。同時,聊天機器人Gemini、虛擬角色伴侶Character.AI、AI寫作工具Notion AI等AI工具月訪問量也都穩(wěn)定在超1億次,各個賽道展現(xiàn)出百花齊放的態(tài)勢。

然而,看似火熱的AI視頻生成產(chǎn)品賽道,卻透出絲絲的寒氣。

雖然新玩家還在不斷進入,但一線行業(yè)大佬已經(jīng)帶頭“警告”。近日,百度董事長兼CEO李彥宏在2024年Q3總監(jiān)會上說:“Sora這種視頻生成的投入周期太長,10年、20年都可能拿不到業(yè)務收益。無論多么火爆,百度都不去做?!?/p>

而聚焦產(chǎn)品落地形勢,Sora還沒有正式推出,炙手可熱的AI視頻生成“代餐”已經(jīng)熱度驟降。

據(jù)SimilarWeb統(tǒng)計,位居全球前列的AI視頻生成企業(yè)Luma AI網(wǎng)站在9月的總訪問量僅為1181萬次,環(huán)比下跌38.49%;紅極一時的Pika在9月總訪問量僅110.8萬次,環(huán)比下跌9.78%。

再看看上半年其他幾家存在感較強的種子選手,被稱為AI視頻生成領域的“老大哥”的Runway在9月流量僅755.8萬次,不及ChatGPT的1/400;我國知名AI創(chuàng)企愛詩科技推出的PixVerse在9月總訪問量為407.7萬次,不及ChatGPT的1/700。

類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益”

▲部分AI產(chǎn)品9月全球總訪問量情況(數(shù)據(jù)來自SimilarWeb,智東西制圖)

一邊,Meta、字節(jié)、快手等互聯(lián)網(wǎng)大廠都相繼入局,推出Movie GenKling AI等競品;智譜AI、Minimax等大模型創(chuàng)企也推出了智譜清影、Video-01等新模型,讓“內(nèi)卷”的競爭更具緊迫感;另一邊,AI視頻生成工具之間差異化越來越小,小頭部們用戶增長乏力已成為不爭的事實,增長壓力一天高于一天。

Sora仍是“期貨”,而類Sora產(chǎn)品已經(jīng)遇到肉眼可見的瓶頸,面臨入秋轉寒的生存挑戰(zhàn)。

一、8個月Sora“祛魅”:期貨難產(chǎn)、負責人跳槽、實際體驗不佳

今年2月,橫空出世的Sora一舉將AI視頻賽道變得炙手可熱。

彼時,相比Runway、Pika、PixVerse等在2023年6月-11月扎堆入場的視頻模型,Sora不僅對文本理解更深刻,可以準確地呈現(xiàn)提示詞,而且能在一個生成的視頻中創(chuàng)建多個鏡頭,準確地保留角色和視覺風格,生成長達1分鐘的質(zhì)量驚艷的視頻,讓無數(shù)人驚嘆:“以后可能不需要人拍電影了!”

然而8個月后的今天,OpenAI仍未推出Sora,Sora兩位負責人之一卻在10月4日宣布跳槽去了谷歌DeepMind,這款“期貨”產(chǎn)品正在逐漸被人們遺忘,社交媒體的討論熱度和人們的期待程度都已經(jīng)驟降。

近期的種種跡象,表明OpenAI在當時亮出這款視頻模型時,并沒有準備好。

在Sora發(fā)布后,有一小部分紅隊測試人員和藝術家可以使用Sora。但據(jù)外媒The Information近期報道,一些試用了Sora的電影制作人體驗并不太理想。

首先,Sora生成的視頻在呈現(xiàn)提示詞上不夠準確。例如,電影制作人帕特里克·塞德伯格 (Patrick Cederberg)說,他必須讓模型生成數(shù)百個短片,才能找到一個可用的短片。換句話說,Sora的使用非常困難。

其次,生成視頻耗時久、一致性保持不足。比如另一位試用者稱,他最初需要10多分鐘才能生成一段時長約1分鐘的短片,而且Sora也很難在整個視頻片段中保持相同的風格,物體和角色保持一致更加困難。

此外,“恐怖谷”效應多發(fā)。一位與OpenAI高管交談過的人士稱,Sora生成的視頻總是包含奇怪的物理現(xiàn)象,比如憑空出現(xiàn)一把椅子,或者錯誤地解剖分割事物。換句話說,市面上AI視頻生成工具有的“翻車”場面,Sora也都有。

這表明,Sora在技術層面仍存在缺陷和不成熟,至少與市面上已發(fā)布的產(chǎn)品相比,沒有展現(xiàn)出太大優(yōu)勢。

一邊Sora“難產(chǎn)”的跡象日益明顯,另一邊Sora項目團隊也面臨動蕩,為Sora的如期出世增添了極大不確定性。

10月4日,Sora項目負責人蒂姆?布魯克斯(Tim Brooks)在社交平臺X上官宣離職,加入谷歌DeepMind?!拔覍⒓尤牍雀鐳eepMind致力于視頻生成和世界模擬器!”布魯克斯說。這很有可能將Sora的炮彈安到了谷歌視頻生成模型Veo上,成為進攻OpenAI的強力火炮。

類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益”

▲Sora兩位負責人之一Tim Brooks發(fā)文宣布跳槽去了谷歌DeepMind

而就在不久前的9月26日,OpenAI首席技術官米拉·穆拉蒂(Mira Murati),以及在o1模型、GPT-4o、GPT-4v模型的開發(fā)過程中扮演了重要角色的研究副總裁巴雷特·佐夫(Barret Zoph)與首席研究官鮑勃·麥克格盧(Bob McGrew)也宣布離職。技術領頭人一個接一個離開,讓Sora研發(fā)項目的進展變得前途未卜。

研發(fā)部門靈魂人物的離開,很可能改變Sora的研發(fā)方向和節(jié)奏。

實際上,OpenAI已傳出正在重新訓練Sora,目的就是為了讓Sora在正式發(fā)布時還能保持優(yōu)勢。

9月底,一位與OpenAI高管交談過的人士向外媒稱,OpenAI正在訓練新版Sora,希望它能快速生成質(zhì)量更高、時間更長的視頻。這位人士稱,為了訓練Sora,OpenAI收集了數(shù)百萬小時的視頻作為訓練數(shù)據(jù),高分辨率,并包含多種風格和主題。

然而這個重新訓練的Sora什么時候能跟大家見面?答案似乎是遙遙無期。

無論是Sora體驗和技術本身的缺陷,還是Sora項目團隊的動蕩,亦或是“回爐重造”的消息,都指向Sora的優(yōu)勢可能已經(jīng)不保,也意味著AI視頻生成同行的機會在變大。

一邊,OpenAI的Sora的進展“秋風蕭瑟”;另一邊,其他AI視頻生成行業(yè)看到了自家產(chǎn)品的可乘之機,“熱火朝天”地發(fā)新品和招攬用戶。

二、同行加速占領AI視頻生成市場,創(chuàng)企與巨頭熱戰(zhàn),但寒潮已來

Sora日益降溫,AI視頻生成同行在2024年夏天已快速占領市場,開啟多輪熱戰(zhàn)。

在國外,當Sora還是一個“餅”,Runway、Pika、Luma AI、Stability AI等創(chuàng)企已經(jīng)把好用的AI視頻生成工具免費給用戶用,Meta、谷歌等硅谷科技大廠們也試圖動搖Sora的根基。

AI視頻生成領域“老大哥”Runway9月的新品已將視頻生成時長延長至40秒,幾乎追平Sora展示的效果;Luma AI比Sora效果更真實還免費,在SimilarWeb統(tǒng)計的全球AI產(chǎn)品訪問量為AI視頻生成類工具排名第一;Pika也在2024年10月已推出Pika 1.5,更真實的運動效果和大屏幕鏡頭堪稱驚艷……

Meta于11月推出了自帶配音的文生視頻模型Movie Gen,直接用一個完整的評測體系宣告自己打敗Sora;谷歌已從團隊層面削弱Sora的戰(zhàn)斗力,Sora項目兩位負責人之一已于近期加入谷歌DeepMind,為自家AI視頻生成工具Veo注入火力……一把又一把火越燒越旺。

類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益”

▲Meta發(fā)測試結果證明自家Movie Gen趕超Sora

在大洋彼岸的中國,AI創(chuàng)企和科技巨頭也已推出多款“中國造Sora”,在剛剛過去的夏天開啟了一輪輪熱戰(zhàn)。

愛詩科技、生數(shù)科技、智象未來、Morph Studio、智譜AI、Minimax等AI創(chuàng)企都已推出了公眾可用的AI視頻生成工具,免費策略、功能更新、玩法創(chuàng)新輪番轟炸;科技大廠阿里、字節(jié)跳動、快手、騰訊等也都入場攪局,對這一市場虎視眈眈。

快手推出的可靈AI在全球現(xiàn)象級爆紅,字節(jié)推出的即夢AI憑借CapCut(剪映)已成為許多短視頻博主創(chuàng)作必備工具,愛詩科技推出的PixVerse率先打開國際市場并多次迭代,生數(shù)科技的Vidu初步打入動漫影視圈……其中后發(fā)制人的快手7月推出的可靈AI在2024年8月訪問量達1448萬,環(huán)比增長591.54%,位列全球AI產(chǎn)品流量排行榜第32位,在AI視頻生成賽道排名僅次于Luma AI。

總之,在Sora靜默的這半年多里,同行正加速占領AI視頻生成市場。

類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益” 類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益” 類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益” 類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益” 類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益”

▲部分熱門AI視頻生成產(chǎn)品/模型進展情況

AI視頻生成賽道的戰(zhàn)況在盛夏推至頂峰,但大戰(zhàn)入秋后的結果如何?

就在產(chǎn)業(yè)和市場猝不及防之際,一場寒潮已經(jīng)悄然潛入,不少紅極一時的類Sora產(chǎn)品熱度驟降。

今年9月,根據(jù)InfoQ等科技媒體聯(lián)合推出的AI產(chǎn)品榜·全球降速榜,上榜的前五名中有兩名都是AI視頻生成工具:Luma AI 9月網(wǎng)站W(wǎng)eb訪問量為12.13M,環(huán)比下降38.49%,位居第二;Viggle 9月網(wǎng)站W(wǎng)eb訪問量為2.85M,環(huán)比下跌36.13%。

類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益”

▲AI產(chǎn)品榜·全球降速榜(圖源:InfoQ)

而正如前文提到,據(jù)第三方平臺AIGCRank援引全球知名數(shù)據(jù)機構SimilarWeb數(shù)據(jù),眾多全球AI產(chǎn)品2024年8月訪問量繼續(xù)上漲。排名前20的AI產(chǎn)品中,除了月訪問超20億的“常青樹”ChatGPT,還有AI搜索引擎Perplexity、虛擬角色JanitorAI、PDF工具Liner等多個領域的黑馬,卻未出現(xiàn)一個AI視頻生成工具。

類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益”

▲全球AI產(chǎn)品2024年8月訪問量榜單(圖源:AIGCRank)

前50名單中僅出現(xiàn)了排名22的Luma AI,但訪問量僅1920萬,環(huán)比下跌14.9%。按照這樣的趨勢,這棵獨苗在下個月統(tǒng)計中很有可能被踢出前50名。

類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益”

▲全球AI產(chǎn)品2024年8月訪問量榜單(圖源:AIGCRank)

當然,一些新晉AI視頻生成產(chǎn)品的增長還是不錯的,比如快手推出的Kling AI(可靈AI)海外版9月出??偘馮op1,幾乎從零開始月訪問量達1765萬次;生數(shù)科技7月在全球上線的Vidu?8月100倍增長,增速高達14158.35%。

然而,這些產(chǎn)品的用戶體量還是比較小,如何增長到Luma AI那樣的水平,并克服后者還未克服的瓶頸,是新入局者打響第一炮后不得不面對的問題。

而科技巨頭那邊,情況也并沒有看起來的那樣樂觀。

無論是國外的Meta、谷歌,還是國內(nèi)的阿里、字節(jié)、騰訊等,布局AI視頻生成賽道步伐都比較謹慎。它們大多數(shù)沒有推出全民級的消費產(chǎn)品,而是以試水為主。背后,無疑是在衡量算力及數(shù)據(jù)的巨額投入,與親自做AI視頻生成的收益是否成正比。

這不禁讓人思考:AI視頻賽道入秋,大廠們的余糧也不足了?

三、視頻大模型為何始終發(fā)布雷聲大,落地雨點???

當下,整個類Sora產(chǎn)品市場正進入一個調(diào)整期。

類Sora產(chǎn)品賽道的瓶頸已經(jīng)展露出來。在親自體驗多款AI視頻生成工具并與多位消費者交流之后,筆者認為,當下類Sora產(chǎn)品主要存在共性問題在于技術成熟度不足。具體表現(xiàn)在:

1、生成視頻時長限制。很多人用到的AI視頻生成工具僅能生成4-5秒的視頻,對于需要完整表達內(nèi)容的創(chuàng)作者來說過于短暫,難以進行影視創(chuàng)作等商業(yè)化支持。即便一些平臺的視頻生成時間已經(jīng)接近1分鐘,但仍然存在前后一致性、動態(tài)不足等問題。

2、功能更新突破性不足。過去一段時間,多家AI視頻生成廠商都對功能進行密集迭代,但大多是“錦上添花”而缺乏躍進式體驗升級。比如Pika推出了唇形同步功能LipSync、AI配音工具Sound Effects、風格選項等新功能,但并未給用戶帶來突破性的體驗,出現(xiàn)“同質(zhì)化”趨勢。

3、等待時間過長。比如在Luma AI的Dream Machine發(fā)布后,由于大量用戶涌入使用,服務器壓力過大,很多用戶需要排隊等待數(shù)小時才能得到生成的視頻,從而大大消耗了用戶的耐心,讓體驗打折扣。從企業(yè)角度來說,提供AI視頻生成服務是一項遠比聊天機器人更耗費算力的工作,成本壓力大。

4、高昂的付費價格。雖然各家AI視頻生成工具都推出了免費服務,但大多都有次數(shù)和質(zhì)量的限制。以Dream Machine為例,其有29.99美元的標準檔、99.99美元的專業(yè)檔以及499.99美元的高級檔等不同檔次的付費選項,高昂的價格使得當下AI視頻生成工具的性價比大打折扣,影響其熱度進一步提升。

而從外部環(huán)境來看,當下AI視頻生成在商業(yè)化方面也缺乏應用市場的刺激。

當下,在經(jīng)濟增長放緩的背景下,無論是消費端用戶還是各行各業(yè)企業(yè)對AI投入都會更加謹慎。

以短視頻創(chuàng)作UGC市場為例,今年7月抖音可快手兩大短視頻廠商都親自下場,分別推出《三星堆:未來啟示錄》、《山海奇鏡之劈波斬浪》兩部AI生成短劇,盡管在平臺的帶動下兩部AI短劇迅速播放破億,并吸引了不少創(chuàng)作者開始嘗試AI視頻生成。然而,時隔三個月,在各大平臺上并未看到AI生成短劇扎堆跟進出現(xiàn)的勢頭。幾位嘗試過AI的短視頻創(chuàng)作者告訴智東西,主要因為當下內(nèi)容賽道競爭激烈,變現(xiàn)更加艱難,他們更愿意從話題、內(nèi)容質(zhì)量等方面去提升而非增大技術成本投入。

以AI被寄予高希望變革的影視行業(yè)為例,據(jù)央視新聞報道,2024年上半年,北美電影票房35.55億美元,同比下降19.2%;據(jù)燈塔專業(yè)版,2024年國慶檔(10月1日-10月7日)票房同比去年的27.36億下滑了23%……在這種背景下,即便已經(jīng)有不少影視人、短視頻創(chuàng)作者選擇AI視頻生成工具進行創(chuàng)作,但付費意愿卻不高。

向內(nèi)看AI視頻生成技術發(fā)展仍不成熟,向外看AI視頻生成賽道的商業(yè)化外部條件不足,這也解釋了為什么視頻大模型始終發(fā)布雷聲大,落地雨點小。

結語:冷靜看待AI產(chǎn)品熱,AI視頻賽道仍需等風來

當人們熱衷于AI產(chǎn)品的火熱落地時,AI視頻生成工具已經(jīng)悄然入秋,Sora的難產(chǎn)和AI視頻生成同行的瓶頸不容忽視。只有冷靜看待技術產(chǎn)業(yè)賽道的周期性特點,企業(yè)和產(chǎn)業(yè)才能夠在日益激烈的競賽中拔得頭籌。

旱季長根系,雨季長葉子。與聊天機器人、虛擬角色、翻譯工具等賽道相比,AI視頻生成目前的剛需賽道影視制作行業(yè)本身面臨下行壓力,阻礙了AI視頻生成產(chǎn)品的商業(yè)化落地。寒冬隨時可能到來,類Sora產(chǎn)品玩家在技術迭代和產(chǎn)品擴張時,只有保證生存下來才能在來年春天等到風來。