類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益”
當下,各路生成式AI工具落地如火如荼。
據全球知名數據機構SimilarWeb統計,2024年9月,穩居全球第一的ChatGPT網站月訪問量環比增長18.71%,達到31.24億次。同時,聊天機器人Gemini、虛擬角色伴侶Character.AI、AI寫作工具Notion AI等AI工具月訪問量也都穩定在超1億次,各個賽道展現出百花齊放的態勢。
然而,看似火熱的AI視頻生成産品賽道,卻透出絲絲的寒氣。
雖然新玩家還在不斷進入,但一線行業大佬已經帶頭“警告”。近日,百度董事長兼CEO李彥宏在2024年Q3總監會上說:“Sora這種視頻生成的投入周期太長,10年、20年都可能拿不到業務收益。無論多麽火爆,百度都不去做。”
而聚焦産品落地形勢,Sora還沒有正式推出,炙手可熱的AI視頻生成“代餐”已經熱度驟降。
據SimilarWeb統計,位居全球前列的AI視頻生成企業Luma AI網站在9月的總訪問量僅爲1181萬次,環比下跌38.49%;紅極一時的Pika在9月總訪問量僅110.8萬次,環比下跌9.78%。
再看看上半年其他幾家存在感較強的種子選手,被稱爲AI視頻生成領域的“老大哥”的Runway在9月流量僅755.8萬次,不及ChatGPT的1/400;我國知名AI創企愛詩科技推出的PixVerse在9月總訪問量爲407.7萬次,不及ChatGPT的1/700。
▲部分AI産品9月全球總訪問量情況(數據來自SimilarWeb,智東西制圖)
一邊,Meta、字節、快手等互聯網大廠都相繼入局,推出Movie Gen、Kling AI等競品;智譜AI、Minimax等大模型創企也推出了智譜清影、Video-01等新模型,讓“內卷”的競爭更具緊迫感;另一邊,AI視頻生成工具之間差異化越來越小,小頭部們用戶增長乏力已成爲不爭的事實,增長壓力一天高于一天。
Sora仍是“期貨”,而類Sora産品已經遇到肉眼可見的瓶頸,面臨入秋轉寒的生存挑戰。
一、8個月Sora“祛魅”:期貨難産、負責人跳槽、實際體驗不佳
今年2月,橫空出世的Sora一舉將AI視頻賽道變得炙手可熱。
彼時,相比Runway、Pika、PixVerse等在2023年6月-11月紮堆入場的視頻模型,Sora不僅對文本理解更深刻,可以准確地呈現提示詞,而且能在一個生成的視頻中創建多個鏡頭,准確地保留角色和視覺風格,生成長達1分鍾的質量驚豔的視頻,讓無數人驚歎:“以後可能不需要人拍電影了!”
然而8個月後的今天,OpenAI仍未推出Sora,Sora兩位負責人之一卻在10月4日宣布跳槽去了谷歌DeepMind,這款“期貨”産品正在逐漸被人們遺忘,社交媒體的討論熱度和人們的期待程度都已經驟降。
近期的種種迹象,表明OpenAI在當時亮出這款視頻模型時,並沒有准備好。
在Sora發布後,有一小部分紅隊測試人員和藝術家可以使用Sora。但據外媒The Information近期報道,一些試用了Sora的電影制作人體驗並不太理想。
首先,Sora生成的視頻在呈現提示詞上不夠准確。例如,電影制作人帕特裏克·塞德伯格 (Patrick Cederberg)說,他必須讓模型生成數百個短片,才能找到一個可用的短片。換句話說,Sora的使用非常困難。
其次,生成視頻耗時久、一致性保持不足。比如另一位試用者稱,他最初需要10多分鍾才能生成一段時長約1分鍾的短片,而且Sora也很難在整個視頻片段中保持相同的風格,物體和角色保持一致更加困難。
此外,“恐怖谷”效應多發。一位與OpenAI高管交談過的人士稱,Sora生成的視頻總是包含奇怪的物理現象,比如憑空出現一把椅子,或者錯誤地解剖分割事物。換句話說,市面上AI視頻生成工具有的“翻車”場面,Sora也都有。
這表明,Sora在技術層面仍存在缺陷和不成熟,至少與市面上已發布的産品相比,沒有展現出太大優勢。
一邊Sora“難産”的迹象日益明顯,另一邊Sora項目團隊也面臨動蕩,爲Sora的如期出世增添了極大不確定性。
10月4日,Sora項目負責人蒂姆・布魯克斯(Tim Brooks)在社交平台X上官宣離職,加入谷歌DeepMind。“我將加入谷歌DeepMind致力于視頻生成和世界模擬器!”布魯克斯說。這很有可能將Sora的炮彈安到了谷歌視頻生成模型Veo上,成爲進攻OpenAI的強力火炮。
▲Sora兩位負責人之一Tim Brooks發文宣布跳槽去了谷歌DeepMind
而就在不久前的9月26日,OpenAI首席技術官米拉·穆拉蒂(Mira Murati),以及在o1模型、GPT-4o、GPT-4v模型的開發過程中扮演了重要角色的研究副總裁巴雷特·佐夫(Barret Zoph)與首席研究官鮑勃·麥克格盧(Bob McGrew)也宣布離職。技術領頭人一個接一個離開,讓Sora研發項目的進展變得前途未蔔。
研發部門靈魂人物的離開,很可能改變Sora的研發方向和節奏。
實際上,OpenAI已傳出正在重新訓練Sora,目的就是爲了讓Sora在正式發布時還能保持優勢。
9月底,一位與OpenAI高管交談過的人士向外媒稱,OpenAI正在訓練新版Sora,希望它能快速生成質量更高、時間更長的視頻。這位人士稱,爲了訓練Sora,OpenAI收集了數百萬小時的視頻作爲訓練數據,高分辨率,並包含多種風格和主題。
然而這個重新訓練的Sora什麽時候能跟大家見面?答案似乎是遙遙無期。
無論是Sora體驗和技術本身的缺陷,還是Sora項目團隊的動蕩,亦或是“回爐重造”的消息,都指向Sora的優勢可能已經不保,也意味著AI視頻生成同行的機會在變大。
一邊,OpenAI的Sora的進展“秋風蕭瑟”;另一邊,其他AI視頻生成行業看到了自家産品的可乘之機,“熱火朝天”地發新品和招攬用戶。
二、同行加速占領AI視頻生成市場,創企與巨頭熱戰,但寒潮已來
Sora日益降溫,AI視頻生成同行在2024年夏天已快速占領市場,開啓多輪熱戰。
在國外,當Sora還是一個“餅”,Runway、Pika、Luma AI、Stability AI等創企已經把好用的AI視頻生成工具免費給用戶用,Meta、谷歌等矽谷科技大廠們也試圖動搖Sora的根基。
AI視頻生成領域“老大哥”Runway9月的新品已將視頻生成時長延長至40秒,幾乎追平Sora展示的效果;Luma AI比Sora效果更真實還免費,在SimilarWeb統計的全球AI産品訪問量爲AI視頻生成類工具排名第一;Pika也在2024年10月已推出Pika 1.5,更真實的運動效果和大屏幕鏡頭堪稱驚豔……
Meta于11月推出了自帶配音的文生視頻模型Movie Gen,直接用一個完整的評測體系宣告自己打敗Sora;谷歌已從團隊層面削弱Sora的戰鬥力,Sora項目兩位負責人之一已于近期加入谷歌DeepMind,爲自家AI視頻生成工具Veo注入火力……一把又一把火越燒越旺。
▲Meta發測試結果證明自家Movie Gen趕超Sora
在大洋彼岸的中國,AI創企和科技巨頭也已推出多款“中國造Sora”,在剛剛過去的夏天開啓了一輪輪熱戰。
愛詩科技、生數科技、智象未來、Morph Studio、智譜AI、Minimax等AI創企都已推出了公衆可用的AI視頻生成工具,免費策略、功能更新、玩法創新輪番轟炸;科技大廠阿裏、字節跳動、快手、騰訊等也都入場攪局,對這一市場虎視眈眈。
快手推出的可靈AI在全球現象級爆紅,字節推出的即夢AI憑借CapCut(剪映)已成爲許多短視頻博主創作必備工具,愛詩科技推出的PixVerse率先打開國際市場並多次叠代,生數科技的Vidu初步打入動漫影視圈……其中後發制人的快手7月推出的可靈AI在2024年8月訪問量達1448萬,環比增長591.54%,位列全球AI産品流量排行榜第32位,在AI視頻生成賽道排名僅次于Luma AI。
總之,在Sora靜默的這半年多裏,同行正加速占領AI視頻生成市場。
▲部分熱門AI視頻生成産品/模型進展情況
AI視頻生成賽道的戰況在盛夏推至頂峰,但大戰入秋後的結果如何?
就在産業和市場猝不及防之際,一場寒潮已經悄然潛入,不少紅極一時的類Sora産品熱度驟降。
今年9月,根據InfoQ等科技媒體聯合推出的AI産品榜·全球降速榜,上榜的前五名中有兩名都是AI視頻生成工具:Luma AI 9月網站Web訪問量爲12.13M,環比下降38.49%,位居第二;Viggle 9月網站Web訪問量爲2.85M,環比下跌36.13%。
▲AI産品榜·全球降速榜(圖源:InfoQ)
而正如前文提到,據第三方平台AIGCRank援引全球知名數據機構SimilarWeb數據,衆多全球AI産品2024年8月訪問量繼續上漲。排名前20的AI産品中,除了月訪問超20億的“常青樹”ChatGPT,還有AI搜索引擎Perplexity、虛擬角色JanitorAI、PDF工具Liner等多個領域的黑馬,卻未出現一個AI視頻生成工具。
▲全球AI産品2024年8月訪問量榜單(圖源:AIGCRank)
前50名單中僅出現了排名22的Luma AI,但訪問量僅1920萬,環比下跌14.9%。按照這樣的趨勢,這棵獨苗在下個月統計中很有可能被踢出前50名。
▲全球AI産品2024年8月訪問量榜單(圖源:AIGCRank)
當然,一些新晉AI視頻生成産品的增長還是不錯的,比如快手推出的Kling AI(可靈AI)海外版9月出海總榜Top1,幾乎從零開始月訪問量達1765萬次;生數科技7月在全球上線的Vidu 8月100倍增長,增速高達14158.35%。
然而,這些産品的用戶體量還是比較小,如何增長到Luma AI那樣的水平,並克服後者還未克服的瓶頸,是新入局者打響第一炮後不得不面對的問題。
而科技巨頭那邊,情況也並沒有看起來的那樣樂觀。
無論是國外的Meta、谷歌,還是國內的阿裏、字節、騰訊等,布局AI視頻生成賽道步伐都比較謹慎。它們大多數沒有推出全民級的消費産品,而是以試水爲主。
背後,無疑是在衡量算力及數據的巨額投入,與親自做AI視頻生成的收益是否成正比。
這不禁讓人思考:AI視頻賽道入秋,大廠們的余糧也不足了?
三、視頻大模型爲何始終發布雷聲大,落地雨點小?
當下,整個類Sora産品市場正進入一個調整期。
類Sora産品賽道的瓶頸已經展露出來。在親自體驗多款AI視頻生成工具並與多位消費者交流之後,筆者認爲,當下類Sora産品主要存在共性問題在于技術成熟度不足。具體表現在:
1、生成視頻時長限制。很多人用到的AI視頻生成工具僅能生成4-5秒的視頻,對于需要完整表達內容的創作者來說過于短暫,難以進行影視創作等商業化支持。即便一些平台的視頻生成時間已經接近1分鍾,但仍然存在前後一致性、動態不足等問題。
2、功能更新突破性不足。過去一段時間,多家AI視頻生成廠商都對功能進行密集叠代,但大多是“錦上添花”而缺乏躍進式體驗升級。比如Pika推出了唇形同步功能LipSync、AI配音工具Sound Effects、風格選項等新功能,但並未給用戶帶來突破性的體驗,出現“同質化”趨勢。
3、等待時間過長。比如在Luma AI的Dream Machine發布後,由于大量用戶湧入使用,服務器壓力過大,很多用戶需要排隊等待數小時才能得到生成的視頻,從而大大消耗了用戶的耐心,讓體驗打折扣。從企業角度來說,提供AI視頻生成服務是一項遠比聊天機器人更耗費算力的工作,成本壓力大。
4、高昂的付費價格。雖然各家AI視頻生成工具都推出了免費服務,但大多都有次數和質量的限制。以Dream Machine爲例,其有29.99美元的標准檔、99.99美元的專業檔以及499.99美元的高級檔等不同檔次的付費選項,高昂的價格使得當下AI視頻生成工具的性價比大打折扣,影響其熱度進一步提升。
而從外部環境來看,當下AI視頻生成在商業化方面也缺乏應用市場的刺激。
當下,在經濟增長放緩的背景下,無論是消費端用戶還是各行各業企業對AI投入都會更加謹慎。
以短視頻創作UGC市場爲例,今年7月抖音可快手兩大短視頻廠商都親自下場,分別推出《三星堆:未來啓示錄》、《山海奇鏡之劈波斬浪》兩部AI生成短劇,盡管在平台的帶動下兩部AI短劇迅速播放破億,並吸引了不少創作者開始嘗試AI視頻生成。
然而,時隔三個月,在各大平台上並未看到AI生成短劇紮堆跟進出現的勢頭。幾位嘗試過AI的短視頻創作者告訴智東西,主要因爲當下內容賽道競爭激烈,變現更加艱難,他們更願意從話題、內容質量等方面去提升而非增大技術成本投入。
以AI被寄予高希望變革的影視行業爲例,據央視新聞報道,2024年上半年,北美電影票房35.55億美元,同比下降19.2%;據燈塔專業版,2024年國慶檔(10月1日-10月7日)票房同比去年的27.36億下滑了23%……在這種背景下,即便已經有不少影視人、短視頻創作者選擇AI視頻生成工具進行創作,但付費意願卻不高。
向內看AI視頻生成技術發展仍不成熟,向外看AI視頻生成賽道的商業化外部條件不足,這也解釋了爲什麽視頻大模型始終發布雷聲大,落地雨點小。
結語 :冷靜看待AI産品熱,AI視頻賽道仍需等風來
當人們熱衷于AI産品的火熱落地時,AI視頻生成工具已經悄然入秋,Sora的難産和AI視頻生成同行的瓶頸不容忽視。只有冷靜看待技術産業賽道的周期性特點,企業和産業才能夠在日益激烈的競賽中拔得頭籌。
旱季長根系,雨季長葉子。與聊天機器人、虛擬角色、翻譯工具等賽道相比,AI視頻生成目前的剛需賽道影視制作行業本身面臨下行壓力,阻礙了AI視頻生成産品的商業化落地。
寒冬隨時可能到來,類Sora産品玩家在技術叠代和産品擴張時,只有保證生存下來才能在來年春天等到風來。---[智東西/作者 : 李水青*編輯 : 心緣]