国产精品久久久对白_欧美日在线_五月天堂av_国产精品免费视频观看_亚洲国产一区二区在线_www.国产在线_麻豆91精品

當前位置:話人間>實時熱點 >   Sora的潘多拉魔盒里有什么 世界模型提前實現了嗎

Sora的潘多拉魔盒里有什么 世界模型提前實現了嗎

導讀:Sora的發展速度似乎超越了同行數個量級,它的橫空出世無疑讓Meta、Runway等巨頭公司和初創競爭對手面臨更大的壓力。OpenAI的文生視頻模型So...

Sora的潘多拉魔盒里有什么 世界模型提前實現了嗎

Sora的發展速度似乎超越了同行數個量級,它的橫空出世無疑讓Meta、Runway等巨頭公司和初創競爭對手面臨更大的壓力。

OpenAI的文生視頻模型Sora的問世引發科技圈熱議,傳遞了AI賽道“大力出奇跡”競爭升級的信號。

盡管Sora尚未對公眾開放,但是OpenAI最新發布了由開發者通過Sora創作的視頻合集,其中包括各種海洋生物在海面上騎自行車、網紅祖母在托斯卡納廚房教做菜、未來火星上的無人機比賽以及鴨嘴獸帶著冒險倉鼠翱翔在天空的場景。

在Sora問世后,一些網友直呼這是對友商的“降維打擊”。AI視頻生成賽道此前的明星公司Runway和Pika等都已公開表示將加入這場競賽。

Sora最Sora最直觀的技術突破不僅在于其生成視頻的逼真性,而且在時長方面也甩開對手更大的距離。

Runway能夠生成4秒長的視頻,用戶可以將其最多延長至16秒,這是AI生成視頻在2023年所能達到的最長時長紀錄;StableVideo和Pika也能分別提供4秒和3秒的視頻。Sora可生成長達1分鐘的視頻,可以說是直接扔出“王炸”。

Runway有“AI視頻界的MidJourney”之稱。幾個月前,Runway剛剛推出了第二代AI生成視頻模型。今年1月,Runway宣布,用戶將能夠通過多頭運動筆刷(MultiMotionBrush)功能,實現對AI生成視頻中多個元素的運動控制。此外,Runway也因其提供了集合多種AI工具的視頻制作解決方案而備受推崇。

Sora發布后,Runway的CEO克里斯托瓦爾·巴倫蘇埃拉(CristóbalValenzuela)在社交媒體X上發布了兩個字:“GameOn(比賽開始了)。”

Pika是AI視頻領域的新晉競爭者,它于去年11月推出了生成式AI視頻工具Pika1.0,目前也已開放測試。Pika此前對標的公司也是Runway,不過在Sora發布后,Pika創始人郭文景回應媒體稱,已在籌備“直接沖,對標Sora”。此外,郭文景還透露,目前已經在招人,具體計劃暫時還不能對外透露。

AI圖像生成領域的另一家領導者StabilityAI也于去年11月推出了生成視頻模型StableVideoDiffusion,但表示它“專門用于研究”,現階段尚未準備好用于“現實世界或商業應用”。

在OpenAICEO奧爾特曼(SamAltman)發布了一段由Sora生成的巫師主題視頻后,Stability創始人兼CEO莫斯塔克(EmadMostaque)在X平臺上回應稱:“你是一位巫師大人。”

谷歌最近也發布了下一代人工智能模型Gemini1.5,并公布了Lumiere模型的研究和演示片段,不過目前還不清楚谷歌計劃何時公開該工具;Meta在去年年底推出了一種新的文本轉視頻模型EmuVideo,并稱Emu將被整合到臉書(Facebook)和照片墻(Instagram)中。

“世界模型”提前實現了嗎

本質上,Sora與AI視頻生成公司Pika、Runway等采用了相似的底層模型,即Diffusion擴散模型(DiffusionModel)。但不同之處在于,Pika和Runway等公司都采用了“小模型”的思維,也就是基于上一幀預測下一幀的方法創建視頻;Sora把其中的實現邏輯進行了變化,將U-Net架構替換成了Transformer架構,這種新型架構被稱為DiT,它將視頻和圖像表示為視覺塊編碼(Patch)的較小數據單元的集合,然后將其解碼來創建視頻,并且根據AI“縮尺律”(ScalingLaw),隨著訓練計算量的增加,樣本質量將明顯提高,實現大模型智能涌現的能力,這也幫助其在一定程度上理解真實世界的物理影響和因果關系。

OpenAI最新發布的Sora研究報告就以《視頻生成模型成為世界模擬器》為題,彰顯了其將大模型用于模擬物理世界的雄心。不過對于Sora是否真的理解物理世界,技術界還有不同的觀點。

最直接的反對意見來自圖靈獎得主,Meta公司首席科學家、AI團隊負責人楊立昆(YannLeCun)。在他看來,僅僅根據提示詞(prompt)生成逼真視頻并不能代表一個模型理解了物理世界,生成視頻的過程與基于世界模型的因果預測完全不同。他在X平臺上亮出觀點:“這里存在‘巨大’的誤導。”

楊立昆是AI“世界模型”概念的主要倡導者,Runway和Pika等公司都在朝著“世界模型”的發展方向前行。所謂“世界模型”,就是對真實的物理世界進行建模,讓機器像人類一樣,對世界有全面準確的認知。盡管“世界模型”不是AI視頻生成的必需要素,它卻是該領域較為高端的一個研究方向,學術色彩更濃。

楊立昆分析稱,模型生成逼真視頻的空間非常大,視頻生成系統只需要產生一個合理的示例就算成功。不過對于一個物理世界的真實視頻而言,其合理的后續延續空間卻非常小,生成這些延續的代表性片段,特別是在特定行動條件下,任務難度更大。此外生成視頻的后續內容不僅成本高昂,實際上也毫無意義。基于這一理論,楊立昆認為,更理想的做法是生成視頻后續內容的抽象表達,并消除無關場景中的細節。

在Sora發布同一天,Meta也推出了AI視頻模型——聯合嵌入預測架構(V-JEPA)。楊立昆解釋道,JEPA創建的視頻不是生成式的,而是在表示空間中進行預測。“聯合嵌入擊敗了生成式。”他表示。

Meta研究員田淵棟也在X平臺上表示:“在可學習的潛在空間而不是原始空間中進行規劃/搜索有其獨特的優勢,沿著這個思路,我們做了一系列的工作,包括最近發布的擴散世界模型。”

Sora顯然也是奔著“世界模型”而去。不同的是,依靠OpenAI強大的工程化能力以及背后的算力支撐,Sora的發展速度似乎超越了同行數個量級,它的橫空出世無疑讓Meta、Runway等巨頭公司和初創競爭對手面臨更大的壓力。的壓力。

站在“巨人的肩膀上”

從OpenAI發布的技術報告中可以發現,強大的Sora作者團隊主要成員有十余人,其中核心成員包括研發負責人布魯克斯(TimBrooks)、皮布爾斯[William(Bill)Peebles]等,他們都畢業于加州大學伯克利分校(UCBerkley)。值得關注的是,核心名單中還有三名華人研究者。

而從Sora技術報告的參考文獻來看,更多來自谷歌、Meta、MIT等業界和學界的技術人員也都作出了重要貢獻,紐約大學助理教授謝賽寧就是其中的一位。盡管他公開表示自己與Sora團隊沒有關系,但他與皮布爾斯在擴散模型DiT方面的工作,為Sora大模型的實現提供了基礎。

謝賽寧在X平臺上表示:“Bill和我在DiT項目上工作時,我們沒有創造新奇事物,而是優先考慮兩個方面:簡單性和可擴展性。這些優先事項提供的不僅僅是概念上的優勢。”

他還推測,Sora模型可能擁有約30億參數。謝賽寧表示,如果這一推測合理,可能表明訓練Sora模型不需要像人們預期的使用那么多的GPU算力,而且預計未來大模型的迭代會非常快。

外界也十分關注Sora大模型橫空出世后對于行業及消費者的影響,尤其是Sora的出現對于通用人工智能(AGI)的實現意味著什么。

目前來看,盡管業內都認為Sora模型的出現會具有顛覆性的意義,但這種影響力究竟會在何時呈現出爆發威力,似乎很難被預估。

360創始人周鴻祎發布微博稱,Sora的誕生意味著AGI的實現可能從10年縮短至一兩年。不過據獵豹移動董事長CEO傅盛在朋友圈的觀點,他認為,Sora雖然很強大,但是更多的是“暴力美學”,還談不上徹底理解物理世界,與AGI提前到來也沒有太大的關系。

游戲行業資深投資人、豐厚資本創始合伙人譚群釗認為,Sora是大型語言模型的再次重要突破,有幾個趨勢值得關注:首先是文字寫作能力會很重要,“文科生要崛起了”,其次是創意和品味很重要。

他對第一財經記者表示:“過去三十年程序員用軟件定義世界,將來會回歸到用文字描述世界。AI仍然是工具,需要專業背景,但創意和品味最重要。”在他看來,如果Sora能夠實現目前已經公布出來的視頻效果,那么可能會最先沖擊短劇、短視頻領域。

3D生成式AI初創公司影眸科技CTO張啟煊告訴第一財經,OpenAI發布Sora的底層邏輯是通過一個“現實模擬器”來實現AGI,生成無窮無盡的現實數據。他認為,Sora這類大模型的工作往后發展,如果能夠做到高度可控性,那么將會顛覆整個CGI(電腦特效技術)工業乃至游戲引擎行業。“到時候就是圖形學不存在了。”他說道。

張啟煊表示,Sora對消費者和行業都會產生一定的影響。“對普通人來說,如果OpenAI開放API或者有團隊能夠復現這種視頻創建能力,相信很快就會在C端視頻應用里看到這樣的功能。”他說,“對行業來說,目前的影響不會有想象中那么大,可能更多是一些視頻素材的收集工作可以得到極大的解放。”

不過Sora目前仍然沒有對公眾開放,而是僅對“紅隊”(Redteaming)開放,還有很多AI安全性相關的問題需要研究部署。在歐美對AI逐漸形成成熟監管體系的背景下,人工智能的任何進展都將受到法規的約束。

上海大邦律師事務所高級合伙人游云庭對記者表示:“Sora在正式向公眾推出前,一定會面臨來自現有行業的挑戰。首先,訓練素材獲得授權的知識產權合規就是個大問題,目前不透明;此外,輸出內容不侵權的合規也是個很大的問題。”

為您推薦
主站蜘蛛池模板: 国产日韩欧美一区二区三区视频 | 国产精品波多野结衣 | 欧美成人 一区二区三区 | 激情深爱 | 69堂国产成人综合久久精品 | xx日韩 | 男大当婚电视剧免费观看电视剧大全在线观看 | 日本精品视频在线播放 | 国产成人片 | 九九九色视频在线观看免费 | 国产婷婷色一区二区三区深爱网 | 欧洲一区二区三区 | 久久久久婷婷国产综合青草 | 青青久久网| 欧美妇乱xxxxx视频 | 国产在线视频在线观看 | 欧美性猛交xxxx乱大交极品 | 欧美日本在线播放 | 免费毛片a | 在线视频观看亚洲 | 国产又黄又爽视频免费观看 | 人人射人人干 | 深夜国产成人福利在线观看女同 | 狠狠久久久久久亚洲综合网 | 久久精品2021国产 | 国产精品jizzjizz | 久久综合九色婷婷97 | 激情视频网站 | 国产黑料不打烊 | 操操碰| 亚洲日本va中文字幕在线不卡 | 日本三级日本三级日本三级极 | 中文字幕在线亚洲 | 黄色软件大全 | 日本欧美小视频 | 中文字幕毛片 | 日本黄色一级视频 | 三级在线观看国产 | 亚洲三级在线 | 九九99久久 | 亚洲成a人片在线观看中文 亚洲成a人片在线观看中文!!! |