時時頭條
  • 娛樂
  • 體育
  • 財經
  • 科技
  • 旅遊
  • 軍事
  • 育兒
  • 時尚
  • 遊戲
  • 歷史
  1. 首頁
  2. 財經

重磅!OpenAI首個影片生成模型釋出 效果炸裂

2024-02-16 09:39:04

據OpenAI官網,OpenAI首個影片生成模型Sora釋出,完美繼承DALL·E 3的畫質和遵循指令能力,能生成長達1分鐘的高畫質影片。

AI想象中的龍年春節,紅旗招展人山人海。

有緊跟舞龍隊伍抬頭好奇官網的兒童,還有不少人掏出手機邊跟邊拍,海量人物角色各有各的行為。


一位時髦女士漫步在東京街頭,周圍是溫暖閃爍的霓虹燈和動感的城市標誌。


一名年約三十的宇航員戴著紅色針織摩托頭盔展開冒險之旅,電影預告片呈現其穿梭於藍天白雲與鹽湖沙漠之間的精彩瞬間,獨特的電影風格、採用35毫米膠片拍攝,色彩鮮豔。


豎屏超近景視角下,這隻蜥蜴細節拉滿:


OpenAI表示,公司正在教授人工智慧理解和模擬運動中的物理世界,目標是訓練出能夠幫助人們解決需要與現實世界互動的問題的模型。在此,隆重推出文字到影片模型——Sora。Sora可以生成長達一分鐘的影片,同時保證視覺質量和符合使用者提示的要求。

如今,Sora正面向部分成員開放,以評估關鍵領域的潛在危害或風險。同時,OpenAI也邀請了一批視覺藝術家、設計師和電影製作人加入,期望獲得寶貴反饋,以推動模型進步,更好地助力創意工作者。OpenAI提前分享研究進展,旨在與OpenAI以外的人士合作並獲取反饋,讓公眾瞭解即將到來的AI技術新篇章。

Sora模型能夠生成包含多個角色、特定型別運動和主體及背景精確細節的複雜場景。該模型不僅能理解使用者在提示中所要求的內容,還能理解這些事物在現實世界中的存在方式。該模型對語言有深刻理解,能準確解讀提示,並生成表達豐富情感的引人入勝的角色。Sora還能在單個生成的影片中建立多個鏡頭,使角色和視覺風格保持準確一致。

比如一大群紙飛機在樹林中飛過,Sora知道碰撞後會發生什麼,並表現其中的光影變化。

一群紙飛機在茂密的叢林中翩翩起舞,在樹林中穿梭,就像候鳥一樣。

Sora還可以在單個影片中建立多個鏡頭,並依靠對語言的深入理解準確地解釋提示詞,保留角色和視覺風格。

對於Sora當前存在的弱點,OpenAI也不避諱,模型在準確模擬複雜場景的物理特性方面可能會遇到困難,也可能無法理解具體的因果關係例項。例如“五隻灰狼幼崽在一條偏僻的碎石路上互相嬉戲、追逐”,狼的數量會變化,一些憑空出現或消失。


此外,模型還可能會混淆提示的空間細節,例如左右不分,並且在處理隨時間發生的事件的精確描述方面也可能存在困難,比如跟蹤特定的攝像機軌跡。

如提示詞“籃球穿過籃筐然後爆炸”中,籃球沒有正確被籃筐阻擋。


技術方面,目前OpenAI透露的不多,簡單介紹如下:

Sora是一種擴散模型,從噪聲開始,能夠一次生成整個影片或擴充套件影片的長度,

關鍵之處在於一次生成多幀的預測,確保畫面主體即使暫時離開視野也能保持不變。

與GPT模型類似,Sora使用了Transformer架構,有很強的擴充套件性。

在資料方面,OpenAI將影片和影象表示為patch,類似於GPT中的token。

透過這種統一的資料表示方式,可以在比以前更廣泛的視覺資料上訓練模型,涵蓋不同的持續時間、解析度和縱橫比。

Sora建立在過去對DALL·E和GPT模型的研究之上。它使用DALL·E 3的重述提示詞技術,為視覺訓練資料生成高度描述性的標註,因此能夠更忠實地遵循使用者的文字指令。

除了能夠僅根據文字指令生成影片之外,該模型還能夠獲取現有的靜態影象並從中生成影片,準確地讓影象內容動起來並關注小細節。

該模型還可以獲取現有影片並對其進行擴充套件或填充缺失的幀,請參閱技術論文了解更多資訊(晚些時候釋出)。

Sora是能夠理解和模擬現實世界的模型的基礎,OpenAI相信這一功能將成為實現AGI的重要里程碑。

每日經濟新聞綜合OpenAI官網

熱門資訊
  • “早上就改成了3個月”,存量房貸重定價週期越短越好? | 2024-11-04 11:10:43
  • 中國股市:炒股不需太勤快,一輩子只買這種走勢,從鉅虧到巨賺! | 2024-11-04 11:10:45
  • 一個指標告訴我:牛市並未結束! | 2024-11-04 11:12:29
  • 銀行存款的3個層次,你屬於哪一層?內行人直言不諱! | 2024-11-04 11:12:31
  • 北京有機會超過上海,成為全國第一大經濟中心 | 2024-11-04 11:12:32
  • 深圳房東每月收租45萬元,曬曬他們家一週的伙食,有錢人就是任性 | 2024-11-04 11:12:34
  • 一個家庭有多少錢,才算得上富裕的家庭?4個條件滿足1個就行了? | 2024-11-04 11:12:35
  • 銀行存款又漲息?利率3.125%,存30萬到期利息28125元,值得存嗎 | 2024-11-04 11:12:36
  • 銀行這下老實了,非要問取錢幹嘛?這下碰到厲害的人了吧 | 2024-11-04 11:12:38
  • 11月1日港股央企紅利50ETF(520990)份額增加9300.00萬份,最新份額22.37億份,最新規模20.08億元 | 2024-11-04 11:14:35
  • 極氪10月交付新車25049臺:增長92% 再創歷史新高! | 2024-11-04 11:14:54
  • 牛市來了,林園手把手教你選到百倍股,附選股條件! | 2024-11-04 11:14:55
  • 中國宏橋實控人累計獲280億元分紅,身家超720億元曾問鼎山東首富 | 2024-11-04 11:14:57
  • 低空經濟:正從概念走向現實 | 2024-11-04 11:14:58
  • 猶太人的炒股解套思維:500股補倉法,跌5毛補500,漲5毛出500 | 2024-11-04 11:15:19
  • 如果牛市即將來臨?而你只有五萬本金,建議用最“笨”的方法賺錢 | 2024-11-04 11:16:58
  • 哈爾濱:人均收入不及全國,靠國家補貼的省會城市,房價過萬! | 2024-11-04 11:17:02
  • 美、日、荷壟斷的半導體裝置,被中國廠商撕開了一道口子 | 2024-11-04 11:17:05
  • 中國富人為什麼樂於接受“侮辱性消費” | 2024-11-04 11:17:06
  • 年入千億!全球最狠“外企剋星”,被中國製造踏平了 | 2024-11-04 11:17:08
  • 被玩壞的惠民保,保險公司虧不起了! | 2024-11-04 11:23:27
  • 一位頂級炒股高手坦言:教你“笨”方法炒股,很實用,建議讀15遍 | 2024-11-04 11:23:29
  • 王成棟父子“玩資本”騰挪奧拉股份暴賺66億 雙成藥業扣非連虧8年拉響退市警報 | 2024-11-04 11:26:52
  • 林泰新材4個月過會募資額縮水40% 產品單一研發投入佔比4.45%低於同行 | 2024-11-04 11:26:54
  • 方正閥門業績劇烈波動研發費率連降 方氏家族股權回購存疑應收賬款超3.6億 | 2024-11-04 11:26:56
  • 邁瑞醫療業績失速營收淨利均降至8% 年內派現69億累分紅297億為IPO募資5倍 | 2024-11-04 11:26:59
  • 隆基綠能10年首虧前三季鉅虧65億 鍾寶申反思“光伏內卷”力推差異化戰略 | 2024-11-04 11:27:01
  • 上市險企投資收益驅動三季度淨利暴增460% 負債端持續改善前九月保費收入2.38萬億 | 2024-11-04 11:27:03
  • 貴陽銀行關注類貸款9個月增40億佔3.87% 依賴“吃利差”息差收窄利息淨收入減16億 | 2024-11-04 11:27:05
  • 廣匯能源前三季淨利減28億負債197億 擬164億激進擴產財務壓力加劇 | 2024-11-04 11:27:07
最近發布
突發!TVB知名女星毫無預警宣佈與未婚夫分手,結束長達八年情 面對被黑,蘭姐強勢迴歸。小菲狀態好轉,發宣告。更多內幕揭曉! 中國男籃決戰日本隊,首發五人曝光,廣東隊大贏家,徐傑第一後衛 孫穎莎奪女單冠軍!採訪謙遜立足拼,劉國樑給中國選手頒獎笑開花 分析 馬威交易取消後的影響:湖人還有什麼選擇?只能等休賽期? 火箭vs猛龍前瞻:範弗裡特有望復出戰舊主,火箭欲終結六連敗 梅西轟動宏都拉斯!當地媒體:這是世紀體育盛事! 登記開啟!金中、29中、13中等校動了! 開年暴擊!南京又一家機構跑路了? TechInsights:AI PC未能提振筆記本市場 2024年僅增長5% 睡覺時突然腿抽筋,就是缺鈣?錯!還有這4個原因,別輕易忽視了 泡泡瑪特又贏麻了!此前被調侃是“境內最大的博彩公司” 再也不用扎手指!5億糖尿病患者有福了 傳《尼爾:機械紀元》續作、新《古墓麗影》今年公佈 有工作經驗的畫素畫師如何寫簡歷? 離譜!Xun被搶3條龍,JDG仍然獲勝!Peyz力挽狂瀾,WBG痛失好局 將耗死在國際空間站?59歲美滯留女宇航員求救:喪失重要身體機能 華為FreeClip耳機玫瑰金開售 開放式聆聽設計 CBA俱樂部杯-山西淘汰北控晉級4強 原帥18分 小紅書上移民的中產:曾經北京七套房, 羨慕海外一張床, 如今卻...... 不可抗力停課2天以上退一半保教費,佛山幼兒園收費新規釋出 紅棉襯醉美,2020番順醉美青餅評測 華為FreeClip耳夾耳機玫瑰金配色開售:1299元 64歲寧波老闆,跨界無數次,給員工發8億,即將擁有第三家IPO? 卡友資訊股東持股情況變動 廣州“城市合夥人”:城市與人才的雙向奔赴 有人說孫穎莎粉絲是飯圈文化的時候 卻有些人用真金白銀愛孫穎莎! 男生剪“短髮”髮型乾淨利落,試試這3款,剪完帥氣提升顏值! 7個臀部訓練最佳動作,打造迷人的蜜桃臀! 偉大的4-2!林詩棟奪冠:新科世界第1誕生、超越王楚欽,狂攬3冠 新疆完美了!新小外強於皮特森+黑根斯,承認補強大外良性競爭! 林詩棟奪男單冠軍!採訪大談不容易太謙遜,單獨拍照露出笑容! 國乒最新戰報!林詩棟第2局11-8,衝3冠王,梁靖崑救2局點仍輸球 替補奇兵!快船大將5記3分助隊贏球 哈登好幫手 爆冷!北控男籃吊打奪冠大熱門球隊,外援決定比賽的走向 官宣離任,胡明軒宣佈重要決定,廣東宏遠遺憾,杜鋒祝福 又一個賈德松!崔康熙看人很準,魯媒:卡約又要錯過中國聯賽了 劉國樑憔悴!黑眼圈很重,擋住蒯曼被提醒,孫穎莎王楚欽被裁判整 林詩棟逆轉梁靖崑奪冠,成就三冠王,綜合實力更加突出 CBA最新外援註冊資訊,遼籃4人,新疆補充新援,廣東男籃放棄萊斯 大滿貫收官獎金排名:林詩棟三冠60萬第1,孫穎莎第2王曼昱10萬第9 臺灣律師分析大S遺產劃分,S媽要錢得看汪小菲臉色,打臉光頭安排 臺媒曝大S家人鬆手,讓出撫養權給汪小菲,希望馬筱梅善待孩子 二線白酒暴雷,狼真的來了! 搭上比亞迪,自動駕駛獨角獸,利潤大增170%! 炸裂!外資吹響“加倉中國”集結號背後:科技格局重塑與資產重估 這波夢幻西遊副本積分兌換真是血虧,四賜福的山賊值得買嗎? 《星戰亡命之徒》高階美工又回到CDPR 開發《巫師4》 《哪吒2》登陸北美,首映禮現好萊塢!有觀眾哭花眼妝:特效超預期,買票靠搶 曝張蘭被封年損失近4億,麻六記絕地自救太壯觀,員工曬張蘭近況

©2024 時時頭條 版權所有

隱私政策 | 服務條款 | 聯繫我們