Sora將如何影響自動駕駛?

華輿 2024-02-27 13:30:19

OpenAI在龍年春節扔出了“王炸”:文生視頻大模型Sora。據了解,Sora的革命性不僅是突破了目前AI視頻生成大約10秒的界限,達到了60秒的內容時長,更重要是它能支持多角色,並保持場景、角色的一致性;切換視頻視覺與鏡頭;一定程度遵循真實世界的客觀規律,包括光影變化、水流變化等。

  ▲OpenAI官網截圖

然而,Sora撼動的不僅是視頻、影視行業,還有汽車領域,大模型本身就與自動駕駛有著千絲萬縷的關系。業內指出,Sora或在自動駕駛大有可爲。

對機器人“具身智能”和自動駕駛帶來巨大影響

360集團創始人、董事長周鴻祎在談及Sora的影響稱,這次Sora對物理世界的模擬,至少將會對機器人具身智能和自動駕駛帶來巨大的影響。原來的自動駕駛技術過度強調感知層面,而沒有工作在認知層面。

“其實人在駕駛汽車的時候,很多判斷是基于對這個世界的理解。比如對方的速度怎麽樣,能否發生碰撞,碰撞嚴重性如何,如果沒有對世界的理解就很難做出一個真正的無人駕駛。”周鴻祎表示,這次Sora只是小試牛刀,它展現的不僅僅是一個視頻制作的能力,它展現的是大模型對真實世界有了理解和模擬之後,會帶來新的成果和突破。

在OpenAI對外發布Sora後,特斯拉CEO馬斯克在社交媒體表達了驚歎。隨後,他更多次在社交媒體上發表觀點或回複評論,力證特斯拉在視頻生成上的實力。對此,有網友們表示,連馬斯克也“不淡定”了。

機構指,Sora的成功以及其背後展現出的湧現能力可能爲計算機視覺領域的研究提供了一個明確的方向,成爲未來視頻與模擬領域(例如自動駕駛)的統一範式。

Sora處于內測階段車企明確加大AI投入

據悉,目前Sora仍處于內測階段,據OpenAI官網介紹,當下版本的Sora仍有弱點,“它可能難以准確地模擬複雜場景的物理特性,並且可能無法理解因果關系,也會混淆左和右等。”“正如ChatGPT4令人驚訝其聰明,但深入仔細研究時,事情就有些崩潰,它更多是存在某些特定背景下。”一位科技博主如此表示。正如當前大模型存在“幻覺”,Sora未來必定會通過多次升級來解決這些問題。

  ▲OpenAI官網發布的Sora生成視頻圖像顯示,一輛汽車行駛在盤山公路上

一方面是Sora的登場,能預期未來一段時間會出現的智能湧現,另一方面,各大車企都在大模型與Sora的熱潮下,不斷加快AI的研發。龍年伊始,小鵬汽車CEO何小鵬在節後開工第一天發布的一封內部公開信中提到,要投入共計35億元,發展以智駕爲核心的AI技術。幾乎同時,吉利汽車集團CEO淦家閱發表的開工長文中稱,當下年輕人最關注的科技焦點,就是AIGC(生成式人工智能)。AI將成爲智能汽車競爭的分水嶺,沒有AI的只是出行工具,具備AI的才是智能夥伴。

面對Sora,行業已有這樣的場景暢想:ChatGPT大模型給Sora下達生成視頻的指令,並且能根據人們最初的輸入來實現指令的不斷進階。

  ▲Sora生成視頻截圖

Sora大模型可以根據文本、圖片,乃至視頻生成自動駕駛的模擬世界,訓練現有的自動駕駛感知決策模型,甚至可以把互動的能力加成給現有模型。

在智能座艙層面,Sora可以將文本、2D的大模型交互形式升維成3D,用戶可以隨時生成一段視頻,甚至將沿途拍攝的視頻在線實時剪輯。(完)(原標題:自動駕駛領域Sora大有可爲)

作者/文靜

來源:新華網

0 阅读:4