自動駕駛團隊進軍好萊塢?打造電影級Sora,Odyssey開啟「荷馬史詩」新篇章

新智元 整合編輯:太平洋科技 發(fā)布于:2024-07-09 16:58

在好萊塢歷史上,有幾只動物演員因其杰出的表演而聲名鵲起,成為了家喻戶曉的明星。

例如,華納百年,第一位稱得上明星的不是男星,也不是女星,而是德國牧羊犬Rin Tin Tin。

一戰(zhàn)結(jié)束后,它被美國大兵李鄧肯從戰(zhàn)場帶回國,在20世紀(jì)20年代到30年代參演了多部影片,成為了當(dāng)時最受歡迎的電影明星之一,被譽為「銀幕上的英雄」。

電影海報,Rin Tin Tin獨占大字和視覺中心,誰是電影頭牌一目了然

Rin Tin Tin在處理堆成小山的熱情影迷來信

還有美劇《歡樂一家親》中的Moose,因其在劇中的出色表演而成為了另一個廣受觀眾喜愛的動物明星。

這些著名的動物演員不僅證明了動物在表演藝術(shù)中的天賦,也展現(xiàn)了它們在敘述故事和觸動人心方面的獨特能力。

然而,隨著CGI和AI技術(shù)的進步,越來越多的制片方傾向于使用數(shù)字創(chuàng)作來塑造電影中的動物角色,這不僅因為它能夠避免涉及動物權(quán)益的爭議,還因為數(shù)字創(chuàng)作在制作過程中提供了更大的靈活性和控制度。

好萊塢的巨頭們,如迪士尼、索尼、華納兄弟等,早已將AI技術(shù)納入戰(zhàn)略規(guī)劃。

另一邊,AI科技巨頭也嗅到了好萊塢的商機,今年3月底,OpenAI曾與派拉蒙、環(huán)球和華納兄弟探索等高管見面,展示其Sora模型。

并且已經(jīng)向一些大牌演員和導(dǎo)演授予了Sora的訪問權(quán)限,據(jù)參與該會議的人士透露,OpenAI明確請求工作室的高管們幫助其推廣Sora。

而最近,Odyssey,一款好萊塢級別的視覺AI技術(shù),也宣布將進軍好萊塢電影制作。

自動駕駛駛向好萊塢?

有趣的是,Odyssey是由一幫早前做自動駕駛的人組成。

Cruise前產(chǎn)品副總裁Oliver Cameron、Wayve前技術(shù)副總裁Jeff Hawke成立了Odyssey,宣稱要打造好萊塢級別的視覺AI,該公司的研究人員來自Cruise、Wayve、Waymo、特斯拉、Meta等公司。

兩位自動駕駛汽車公司的資深人士正試圖在好萊塢大展拳腳,不是作為演員,而是作為人工智能軟件的開發(fā)者,未來的大片將在這些軟件上誕生。

他們在舊金山創(chuàng)辦了一家名為Odyssey的初創(chuàng)公司,與OpenAI、Runway和Metaphysic等公司競爭,為專業(yè)電影制作人和動畫師提供工具,志在向早期皮克斯看齊,使命是提供創(chuàng)作電影、電視節(jié)目和視頻游戲的更好方式。

Cameron說,雖然出身自動駕駛汽車領(lǐng)域,但這段經(jīng)歷讓兩位聯(lián)合創(chuàng)始人深知收集自己的真實世界數(shù)據(jù)集來訓(xùn)練模型的重要性。

與其他依靠在互聯(lián)網(wǎng)上搜索視頻數(shù)據(jù)為AI軟件提供素材的文字視頻公司不同,Odyssey正在現(xiàn)實世界中收集自己的三維數(shù)據(jù)集,并以此為模型提供素材。

互聯(lián)網(wǎng)上根本沒有足夠大的三維數(shù)據(jù)集來建立足夠規(guī)模和能力的AI模型,以滿足Odyssey的需求。

他和Hawke在自動駕駛汽車方面的經(jīng)驗讓他們對如何收集Odyssey所需的真實世界數(shù)據(jù)有了一些巧妙的想法,不過Cameron拒絕公開透露其中的方法。

今天,Odyssey從近一年的沉淀中脫穎而出,獲得了來自GV(谷歌風(fēng)投,Alphabet 的風(fēng)險投資部門)的900萬美元種子資金,DCVC、Air Street Capital以及十多位個人早期投資者和天使投資人也參與了投資。

Odyssey的AI軟件在某些方面與OpenAI的Sora或Runway的Gen 3相似,都是將場景或鏡頭序列的文字描述轉(zhuǎn)化為高質(zhì)量的電影短片。

到目前為止,Sora只向少數(shù)初始測試用戶發(fā)布,但OpenAI在今年2月發(fā)布的精彩演示卻讓好萊塢惶恐不安。

電影制片人Tyler Perry在看過Sora的演示后表示,他將「無限期擱置」在亞特蘭大耗資8億美元擴建電影制片廠的計劃,因為Sora讓他懷疑傳統(tǒng)制片廠在未來是否還有用武之地。

演員兼科技投資人Ashton Kutcher表示,他也相信人工智能將很快讓任何人都能創(chuàng)作一部電影,而無需演員、攝制組或好萊塢的巨額預(yù)算。

用AI講好故事

在Odyssey官網(wǎng)釋出的視頻展示和內(nèi)容可以看出,Odyssey的一個核心概念是:用AI更好地講故事。

從最早的祖先圍著篝火講故事到創(chuàng)作了小說《伊利亞特》、《奧德賽》和《一千零一夜》,再到創(chuàng)作電影作品,視覺特效將我們帶向了遙遠的國度,聆聽一個個生動形象的故事。

隨著技術(shù)的發(fā)展,故事的講述方式也在不斷演變。然而,有一點始終不變,偉大的故事都是血汗和淚水的結(jié)晶,而Odyssey就決定用AI講故事。

如今,在網(wǎng)絡(luò)上轉(zhuǎn)一圈就會發(fā)現(xiàn),低質(zhì)AI生成內(nèi)容充斥著我們的生活。

低質(zhì)短視頻、垃圾機器人,許多公司都在利用人工智能制作文字和圖像,吸引你的注意力。

如果處理不當(dāng),AI視頻生成也會朝著類似的方向發(fā)展,我們會被大量沒有火花和內(nèi)核的隨機視頻淹沒。

如果時間足夠長,也許我們就會沉迷于這些垃圾視頻,忘記高質(zhì)量的故事是什么樣子。也許人類將淪為故事的觀看者,而不是故事的講述者。

Odyssey就反對這種短頻快的低質(zhì)視頻接收。他們認可講故事對生活方式的重要性,正如一代代已經(jīng)證明,優(yōu)秀的故事可以提供非常豐富的精神食糧。

同樣,強大的人工智能也是如此,但是需要技術(shù)的進步和正確的構(gòu)建。

Odyssey認為,與其研究一個個優(yōu)化點擊率的算法,不如讓專業(yè)講故事的人掌握一種新的視覺人工智能。

這種視覺人工智能不僅能讓他們制作出令人驚嘆的視頻,還能利用先進的技術(shù),讓腦海中的史詩故事走向大熒幕。

Odyssey的野心:視覺效果對標(biāo)好萊塢級

要想讓AI為好萊塢服務(wù),它必須能夠制作出高質(zhì)量、無閃爍、震撼人心的視覺效果。

但到目前為止,這些模型只能生成不到一分鐘的短視頻序列,而且不能保證在整個序列中人物和背景保持一致。

Odyssey首席執(zhí)行官Oliver Cameron表示,Odyssey公司希望為電影制作人提供對AI生成的鏡頭更精細的控制,并且保證鏡頭一致性,以及更逼真的光影視覺效果。

Cameron告訴《財富》雜志,Odyssey被設(shè)計為「好萊塢級」視覺人工智能,旨在為「世界上最瘋狂的創(chuàng)作者」賦能。

他以導(dǎo)演詹姆斯-卡梅。↗ames Cameron)和他的《阿凡達》(Avatar)電影為例,每部電影的制作時間都超過十年,涉及數(shù)百名視覺特效藝術(shù)家,耗資數(shù)億美元。

Odyssey希望在不犧牲視覺質(zhì)量的前提下,將時間和成本降低到一個五人團隊花費五萬美元、工作六個月。

為了實現(xiàn)「好萊塢級」視覺效果的愿景, Odyssey正在開創(chuàng)好萊塢級別的視覺人工智能,在這里,美麗的場景、人物、光影和動作都可以生成和引導(dǎo)。

此外,Cameron說,Odyssey正在開發(fā)的軟件不僅僅是一個從文字到視頻的模型,而是一個模型家族。

專門從事四項不同的任務(wù):生成三維圖形渲染、生成材料效果(如水或布)、生成運動效果,最后生成光影效果。

環(huán)境三維渲染:

生成不同材質(zhì)紋理:

生成運動效果:

生成光影視覺效果:

傳統(tǒng)的文本到視覺模型相比,這種功能的實現(xiàn)需要更深的技術(shù)層次。

通過訓(xùn)練四個功能強大的生成模型,這些模型能夠?qū)σ曈X的每個層次進行微調(diào)控制,而不是訓(xùn)練一個模型,只能進行單一輸入和單一不可編輯的輸出。

Odyssey旨在讓創(chuàng)作者對場景中的每個元素進行全面、微調(diào)的控制。

從壯麗的山脈、茂密的植被、美麗的河流,到打光運用、人物運動等都可以全方位操控。

簡而言之,這是一種創(chuàng)作電影、電視節(jié)目和視頻游戲的全新方式。

4個模型協(xié)調(diào)運作,形成視頻幀。因此,Odyssey能夠生成集高質(zhì)量的三維圖形、逼真的材質(zhì)、令人驚嘆的光影和可控的運動為一體的高質(zhì)量視頻。

并且,每個模型的輸入也不局限于文本,甚至包括人類創(chuàng)作者用手寫筆繪畫或靜態(tài)數(shù)字圖像。

更重要的是,Odyssey正在圍繞這些模型建立專為高級用戶量身定制的工作流程,并與好萊塢、游戲和其他領(lǐng)域使用的現(xiàn)有制作工作流程進行一流的集成。

這將使電影制片人和專業(yè)視覺特效師(他們是 Odyssey 軟件的目標(biāo)用戶)對最終輸出擁有極大的創(chuàng)作自由,而目前的文本到視頻人工智能模型無法做到這一點。

本文來源:新智元

網(wǎng)友評論

聚超值•精選

最新內(nèi)容

自動駕駛團隊進軍好萊塢?打造電影級Sora,Odyssey開啟「荷馬史詩」新篇章

Odyssey視覺AI發(fā)布預(yù)告,旨在用AI技術(shù)講好電影故事。具備強大的視覺內(nèi)容生成與控制能力,視覺效果對標(biāo)好萊塢制作水平。由自動駕駛團隊打造,該技術(shù)將為電影制作人提供更精細的控制和逼真的光影效果。目標(biāo)是降低成本和時間,并賦能創(chuàng)作者實現(xiàn)高質(zhì)量視頻創(chuàng)作。

自動駕駛團隊 | 好萊塢級視覺AI
體驗完享界S9,我覺得它真懂老板的用車需求。

華為發(fā)布了其第三款“享界”電動車型S9,定位為行政級轎車。該車在外觀和內(nèi)飾上與寶馬5系、奧迪A6等相似,但更接近于這些中型豪華轎車。S9的前排設(shè)計類似智界S7,橢圓方向盤有點突兀;后排則配備零重力座椅、大扶手及冷暖箱,并提供實時對話加密功能以保護隱私。

享界 S9 | 行政級轎車
理想加入“端到端”競賽,雖只是PPT

理想汽車發(fā)布了基于端到端模型的全新自動駕駛技術(shù)架構(gòu),采用“快系統(tǒng)”和“慢系統(tǒng)”進行協(xié)同。與華為、特斯拉等廠商相比,理想方案更為激進,并在VLM視覺語言模型上實現(xiàn)了邏輯思考能力。該方案已完成原型驗證和實車部署,但還需解決安全問題。此舉使得理想成為首個公開端到端技術(shù)方案的車企,在智駕能力上保持競爭力并追趕其他廠商。

端到端 |智能駕駛
銷量第一被華為奪去,理想的智駕能反超嗎?

理想汽車與華為鴻蒙智行成競爭激烈的一對一角逐。上半年銷量,華為超過了理想,但在6月份理想以47774輛超越華為。兩家品牌都押注智駕領(lǐng)域,7月5日,理想發(fā)布了最新智駕路線圖。然而,裁員和投入不足是理想面臨的風(fēng)險。

理想汽車 | 華為鴻蒙智行
18年賦能,李書?粗辛薒EVC什么

吉利旗下品牌LEVC推出首款MPV車型L380,售價37.99-47.99萬元。該車基于新戰(zhàn)略打造,以空間“多變”為核心競爭力,并配備了提升操控、豪華和互聯(lián)等方面的多項配置。翼真L380提供6座、8座版本,未來還將推出更多場景化定制車型。

LEVC | 翼真汽車
二維碼 回到頂部