時時頭條
  • 娛樂
  • 體育
  • 財經
  • 科技
  • 旅遊
  • 軍事
  • 育兒
  • 時尚
  • 遊戲
  • 歷史
  1. 首頁
  2. 財經

重磅!OpenAI首個影片生成模型釋出 效果炸裂

2024-02-16 09:39:04

據OpenAI官網,OpenAI首個影片生成模型Sora釋出,完美繼承DALL·E 3的畫質和遵循指令能力,能生成長達1分鐘的高畫質影片。

AI想象中的龍年春節,紅旗招展人山人海。

有緊跟舞龍隊伍抬頭好奇官網的兒童,還有不少人掏出手機邊跟邊拍,海量人物角色各有各的行為。


一位時髦女士漫步在東京街頭,周圍是溫暖閃爍的霓虹燈和動感的城市標誌。


一名年約三十的宇航員戴著紅色針織摩托頭盔展開冒險之旅,電影預告片呈現其穿梭於藍天白雲與鹽湖沙漠之間的精彩瞬間,獨特的電影風格、採用35毫米膠片拍攝,色彩鮮豔。


豎屏超近景視角下,這隻蜥蜴細節拉滿:


OpenAI表示,公司正在教授人工智慧理解和模擬運動中的物理世界,目標是訓練出能夠幫助人們解決需要與現實世界互動的問題的模型。在此,隆重推出文字到影片模型——Sora。Sora可以生成長達一分鐘的影片,同時保證視覺質量和符合使用者提示的要求。

如今,Sora正面向部分成員開放,以評估關鍵領域的潛在危害或風險。同時,OpenAI也邀請了一批視覺藝術家、設計師和電影製作人加入,期望獲得寶貴反饋,以推動模型進步,更好地助力創意工作者。OpenAI提前分享研究進展,旨在與OpenAI以外的人士合作並獲取反饋,讓公眾瞭解即將到來的AI技術新篇章。

Sora模型能夠生成包含多個角色、特定型別運動和主體及背景精確細節的複雜場景。該模型不僅能理解使用者在提示中所要求的內容,還能理解這些事物在現實世界中的存在方式。該模型對語言有深刻理解,能準確解讀提示,並生成表達豐富情感的引人入勝的角色。Sora還能在單個生成的影片中建立多個鏡頭,使角色和視覺風格保持準確一致。

比如一大群紙飛機在樹林中飛過,Sora知道碰撞後會發生什麼,並表現其中的光影變化。

一群紙飛機在茂密的叢林中翩翩起舞,在樹林中穿梭,就像候鳥一樣。

Sora還可以在單個影片中建立多個鏡頭,並依靠對語言的深入理解準確地解釋提示詞,保留角色和視覺風格。

對於Sora當前存在的弱點,OpenAI也不避諱,模型在準確模擬複雜場景的物理特性方面可能會遇到困難,也可能無法理解具體的因果關係例項。例如“五隻灰狼幼崽在一條偏僻的碎石路上互相嬉戲、追逐”,狼的數量會變化,一些憑空出現或消失。


此外,模型還可能會混淆提示的空間細節,例如左右不分,並且在處理隨時間發生的事件的精確描述方面也可能存在困難,比如跟蹤特定的攝像機軌跡。

如提示詞“籃球穿過籃筐然後爆炸”中,籃球沒有正確被籃筐阻擋。


技術方面,目前OpenAI透露的不多,簡單介紹如下:

Sora是一種擴散模型,從噪聲開始,能夠一次生成整個影片或擴充套件影片的長度,

關鍵之處在於一次生成多幀的預測,確保畫面主體即使暫時離開視野也能保持不變。

與GPT模型類似,Sora使用了Transformer架構,有很強的擴充套件性。

在資料方面,OpenAI將影片和影象表示為patch,類似於GPT中的token。

透過這種統一的資料表示方式,可以在比以前更廣泛的視覺資料上訓練模型,涵蓋不同的持續時間、解析度和縱橫比。

Sora建立在過去對DALL·E和GPT模型的研究之上。它使用DALL·E 3的重述提示詞技術,為視覺訓練資料生成高度描述性的標註,因此能夠更忠實地遵循使用者的文字指令。

除了能夠僅根據文字指令生成影片之外,該模型還能夠獲取現有的靜態影象並從中生成影片,準確地讓影象內容動起來並關注小細節。

該模型還可以獲取現有影片並對其進行擴充套件或填充缺失的幀,請參閱技術論文了解更多資訊(晚些時候釋出)。

Sora是能夠理解和模擬現實世界的模型的基礎,OpenAI相信這一功能將成為實現AGI的重要里程碑。

每日經濟新聞綜合OpenAI官網

熱門資訊
  • 全球鋰電池供應鏈排名,加拿大取代中國躍居第一 | 2024-02-09 17:51:58
  • A股:請注意!盤後傳來重大利好,節後周一,還將迎來大反攻? | 2024-02-09 17:52:01
  • A股:大家做好心理準備,節後,股市很可能會出現更大級別的變盤 | 2024-02-09 17:52:07
  • 張一鳴曾想收購的美版貼吧,沒有放棄上市野心 | 動察 | 2024-02-09 17:54:13
  • 央視獨子!中視傳媒,股價大起大落,業績堪憂 | 2024-02-09 17:54:20
  • 除夕前夜,知名上市公司突發公告:董事長涉嫌行賄被留置!曾任省人大代表,連續多年登上富豪榜…… | 2024-02-09 17:54:23
  • A股收評:做好準備!節後周一將迎來大變盤,新機會馬上要來了 | 2024-02-09 18:08:53
  • 證監會除夕通報!上海思爾芯欺詐發行,公司和多位高管被罰1650萬 | 2024-02-09 18:44:22
  • 梅西仍為蒙牛代言人?官方客服回應;蘋果被曝正在研發可摺疊iPhone丨大公司動態 | 2024-02-09 19:01:23
  • A股:再次踏上一條“不歸路”,誰來為散戶買單?寫給虧損散戶! | 2024-02-09 19:01:34
  • 中國經濟到底還需不需要富士康? | 2024-02-09 19:01:39
  • 李嘉誠:還過個屁年! | 2024-02-09 19:44:07
  • 節後當心大跌!最後一天北上資金大幅拋售這些個股 | 2024-02-09 19:44:12
  • A股:節後會紅週一嗎?不用猜了,我來說一個明確的預判! | 2024-02-09 19:44:15
  • 雲南首富李曉明套現345億元后,與家人移民美國?恩捷股份回應 | 2024-02-09 20:03:44
  • A股:果然又破新低!最後一次提醒所有人,節後周一市場非常關鍵 | 2024-02-09 20:08:14
  • 過年這篇文章你一定要看 | 2024-02-09 20:49:43
  • 日經225指數續刷34年新高 “大牛”行情還能延續多久? | 2024-02-09 20:49:46
  • 融創中國:國投中電同意受讓四川三岔湖長島國際旅遊度假中心有限公司70%權益及債權 | 2024-02-09 20:49:48
  • 餘承東親自道歉:問界M9產能不足,導致使用者抱怨很大 | 2024-02-09 21:10:08
  • 上海綜合實力全國領先,但中國經濟的未來一定在深圳,事實是什麼 | 2024-02-09 21:10:20
  • 在美國,比特幣ETF盯上了“媽媽輩” | 2024-02-09 21:23:36
  • 【財富晚茶】今日股市收評:深指漲1.29%;銀行回撥機械強勢反彈 | 2024-02-09 21:38:22
  • 中國銀聯被央行罰款1540萬元 | 2024-02-09 21:39:36
  • 提振信心,辦法總比困難多 | 2024-02-09 21:50:32
  • 菜鳥衝刺IPO背後:菜鳥困於送貨上門,馬雲錯過物流十年 | 2024-02-09 21:54:26
  • SHEIN若IPO成行,對有海外融資需求的中企是重大利好 | 2024-02-09 21:54:28
  • OKURA HOLDINGS(01655)發盈喜 預計中期將取得除所得稅前利潤不少於約10億日圓 | 2024-02-09 21:54:31
  • 三大交易所釋出可持續發展報告指引:5類上市公司應當披露 | 2024-02-09 22:10:01
  • A股:利好扎堆了,再這樣子下去,節後只會迎來更大級別的變盤 | 2024-02-09 22:25:47
最近發布
突發!TVB知名女星毫無預警宣佈與未婚夫分手,結束長達八年情 面對被黑,蘭姐強勢迴歸。小菲狀態好轉,發宣告。更多內幕揭曉! 中國男籃決戰日本隊,首發五人曝光,廣東隊大贏家,徐傑第一後衛 孫穎莎奪女單冠軍!採訪謙遜立足拼,劉國樑給中國選手頒獎笑開花 分析 馬威交易取消後的影響:湖人還有什麼選擇?只能等休賽期? 火箭vs猛龍前瞻:範弗裡特有望復出戰舊主,火箭欲終結六連敗 梅西轟動宏都拉斯!當地媒體:這是世紀體育盛事! 登記開啟!金中、29中、13中等校動了! 開年暴擊!南京又一家機構跑路了? TechInsights:AI PC未能提振筆記本市場 2024年僅增長5% 睡覺時突然腿抽筋,就是缺鈣?錯!還有這4個原因,別輕易忽視了 泡泡瑪特又贏麻了!此前被調侃是“境內最大的博彩公司” 再也不用扎手指!5億糖尿病患者有福了 傳《尼爾:機械紀元》續作、新《古墓麗影》今年公佈 有工作經驗的畫素畫師如何寫簡歷? 離譜!Xun被搶3條龍,JDG仍然獲勝!Peyz力挽狂瀾,WBG痛失好局 將耗死在國際空間站?59歲美滯留女宇航員求救:喪失重要身體機能 華為FreeClip耳機玫瑰金開售 開放式聆聽設計 CBA俱樂部杯-山西淘汰北控晉級4強 原帥18分 小紅書上移民的中產:曾經北京七套房, 羨慕海外一張床, 如今卻...... 不可抗力停課2天以上退一半保教費,佛山幼兒園收費新規釋出 紅棉襯醉美,2020番順醉美青餅評測 華為FreeClip耳夾耳機玫瑰金配色開售:1299元 64歲寧波老闆,跨界無數次,給員工發8億,即將擁有第三家IPO? 卡友資訊股東持股情況變動 廣州“城市合夥人”:城市與人才的雙向奔赴 有人說孫穎莎粉絲是飯圈文化的時候 卻有些人用真金白銀愛孫穎莎! 男生剪“短髮”髮型乾淨利落,試試這3款,剪完帥氣提升顏值! 7個臀部訓練最佳動作,打造迷人的蜜桃臀! 偉大的4-2!林詩棟奪冠:新科世界第1誕生、超越王楚欽,狂攬3冠 新疆完美了!新小外強於皮特森+黑根斯,承認補強大外良性競爭! 林詩棟奪男單冠軍!採訪大談不容易太謙遜,單獨拍照露出笑容! 國乒最新戰報!林詩棟第2局11-8,衝3冠王,梁靖崑救2局點仍輸球 替補奇兵!快船大將5記3分助隊贏球 哈登好幫手 爆冷!北控男籃吊打奪冠大熱門球隊,外援決定比賽的走向 官宣離任,胡明軒宣佈重要決定,廣東宏遠遺憾,杜鋒祝福 又一個賈德松!崔康熙看人很準,魯媒:卡約又要錯過中國聯賽了 劉國樑憔悴!黑眼圈很重,擋住蒯曼被提醒,孫穎莎王楚欽被裁判整 林詩棟逆轉梁靖崑奪冠,成就三冠王,綜合實力更加突出 CBA最新外援註冊資訊,遼籃4人,新疆補充新援,廣東男籃放棄萊斯 大滿貫收官獎金排名:林詩棟三冠60萬第1,孫穎莎第2王曼昱10萬第9 臺灣律師分析大S遺產劃分,S媽要錢得看汪小菲臉色,打臉光頭安排 臺媒曝大S家人鬆手,讓出撫養權給汪小菲,希望馬筱梅善待孩子 二線白酒暴雷,狼真的來了! 搭上比亞迪,自動駕駛獨角獸,利潤大增170%! 炸裂!外資吹響“加倉中國”集結號背後:科技格局重塑與資產重估 這波夢幻西遊副本積分兌換真是血虧,四賜福的山賊值得買嗎? 《星戰亡命之徒》高階美工又回到CDPR 開發《巫師4》 《哪吒2》登陸北美,首映禮現好萊塢!有觀眾哭花眼妝:特效超預期,買票靠搶 曝張蘭被封年損失近4億,麻六記絕地自救太壯觀,員工曬張蘭近況

©2024 時時頭條 版權所有

隱私政策 | 服務條款 | 聯繫我們