時時頭條
  • 娛樂
  • 體育
  • 財經
  • 科技
  • 旅遊
  • 軍事
  • 育兒
  • 時尚
  • 遊戲
  • 歷史
  1. 首頁
  2. 財經

重磅!OpenAI首個影片生成模型釋出 效果炸裂

2024-02-16 09:39:04

據OpenAI官網,OpenAI首個影片生成模型Sora釋出,完美繼承DALL·E 3的畫質和遵循指令能力,能生成長達1分鐘的高畫質影片。

AI想象中的龍年春節,紅旗招展人山人海。

有緊跟舞龍隊伍抬頭好奇官網的兒童,還有不少人掏出手機邊跟邊拍,海量人物角色各有各的行為。


一位時髦女士漫步在東京街頭,周圍是溫暖閃爍的霓虹燈和動感的城市標誌。


一名年約三十的宇航員戴著紅色針織摩托頭盔展開冒險之旅,電影預告片呈現其穿梭於藍天白雲與鹽湖沙漠之間的精彩瞬間,獨特的電影風格、採用35毫米膠片拍攝,色彩鮮豔。


豎屏超近景視角下,這隻蜥蜴細節拉滿:


OpenAI表示,公司正在教授人工智慧理解和模擬運動中的物理世界,目標是訓練出能夠幫助人們解決需要與現實世界互動的問題的模型。在此,隆重推出文字到影片模型——Sora。Sora可以生成長達一分鐘的影片,同時保證視覺質量和符合使用者提示的要求。

如今,Sora正面向部分成員開放,以評估關鍵領域的潛在危害或風險。同時,OpenAI也邀請了一批視覺藝術家、設計師和電影製作人加入,期望獲得寶貴反饋,以推動模型進步,更好地助力創意工作者。OpenAI提前分享研究進展,旨在與OpenAI以外的人士合作並獲取反饋,讓公眾瞭解即將到來的AI技術新篇章。

Sora模型能夠生成包含多個角色、特定型別運動和主體及背景精確細節的複雜場景。該模型不僅能理解使用者在提示中所要求的內容,還能理解這些事物在現實世界中的存在方式。該模型對語言有深刻理解,能準確解讀提示,並生成表達豐富情感的引人入勝的角色。Sora還能在單個生成的影片中建立多個鏡頭,使角色和視覺風格保持準確一致。

比如一大群紙飛機在樹林中飛過,Sora知道碰撞後會發生什麼,並表現其中的光影變化。

一群紙飛機在茂密的叢林中翩翩起舞,在樹林中穿梭,就像候鳥一樣。

Sora還可以在單個影片中建立多個鏡頭,並依靠對語言的深入理解準確地解釋提示詞,保留角色和視覺風格。

對於Sora當前存在的弱點,OpenAI也不避諱,模型在準確模擬複雜場景的物理特性方面可能會遇到困難,也可能無法理解具體的因果關係例項。例如“五隻灰狼幼崽在一條偏僻的碎石路上互相嬉戲、追逐”,狼的數量會變化,一些憑空出現或消失。


此外,模型還可能會混淆提示的空間細節,例如左右不分,並且在處理隨時間發生的事件的精確描述方面也可能存在困難,比如跟蹤特定的攝像機軌跡。

如提示詞“籃球穿過籃筐然後爆炸”中,籃球沒有正確被籃筐阻擋。


技術方面,目前OpenAI透露的不多,簡單介紹如下:

Sora是一種擴散模型,從噪聲開始,能夠一次生成整個影片或擴充套件影片的長度,

關鍵之處在於一次生成多幀的預測,確保畫面主體即使暫時離開視野也能保持不變。

與GPT模型類似,Sora使用了Transformer架構,有很強的擴充套件性。

在資料方面,OpenAI將影片和影象表示為patch,類似於GPT中的token。

透過這種統一的資料表示方式,可以在比以前更廣泛的視覺資料上訓練模型,涵蓋不同的持續時間、解析度和縱橫比。

Sora建立在過去對DALL·E和GPT模型的研究之上。它使用DALL·E 3的重述提示詞技術,為視覺訓練資料生成高度描述性的標註,因此能夠更忠實地遵循使用者的文字指令。

除了能夠僅根據文字指令生成影片之外,該模型還能夠獲取現有的靜態影象並從中生成影片,準確地讓影象內容動起來並關注小細節。

該模型還可以獲取現有影片並對其進行擴充套件或填充缺失的幀,請參閱技術論文了解更多資訊(晚些時候釋出)。

Sora是能夠理解和模擬現實世界的模型的基礎,OpenAI相信這一功能將成為實現AGI的重要里程碑。

每日經濟新聞綜合OpenAI官網

熱門資訊
  • 瑪莎拉蒂中國月銷僅38輛 經銷商報價降至50萬左右 | 2024-11-04 12:25:12
  • “鴻蒙之父”王成錄回應為何離開華為:不讓鴻蒙生態受到約束 | 2024-11-04 12:25:14
  • 美國針對英特爾潛在財務狀況惡化提供解決方案:救助計劃或超《晶片法案》範圍 | 2024-11-04 12:25:16
  • 事關上海微電子,榮耀,央企能源重組,這個方向將是今年跨年大妖 | 2024-11-04 12:25:18
  • 調整過後,半導體是否還值得看好? | 2024-11-04 12:25:19
  • A股:沒必要等三點收盤了,行情實在太明顯了,接下來將這麼走 | 2024-11-04 12:25:20
  • A股:今天,11月4日,突然上漲意味著什麼? | 2024-11-04 12:25:22
  • 發生什麼了?A股全線大漲! | 2024-11-04 12:26:26
  • Visa 裁員1400名員工。。。 | 2024-11-04 12:26:28
  • 一字跌停,“妖股”崩了!機器人概念,滿屏漲停 | 2024-11-04 12:43:19
  • 華為重磅!“史上最強大Mate”! | 2024-11-04 12:43:20
  • 4連板牛股,突發公告! | 2024-11-04 12:43:22
  • 逾40股漲停!A股這兩大板塊爆發了…… | 2024-11-04 12:43:23
  • 什麼情況?這隻股票半天大跌超52%! | 2024-11-04 12:43:25
  • 封閉就要落後!任正非:華為也要像美國一樣 鴻蒙等開源促技術進步 | 2024-11-04 12:46:03
  • 人形機器人再迎催化!概念股全線爆發,機構:2030年市場規模將達8700億 | 2024-11-04 12:46:04
  • 訊息稱廣汽集團董事長將換人,總經理馮興亞接替曾慶洪 | 2024-11-04 12:46:08
  • 阿里又收穫一家上市公司,東南亞電商代運營企業Synagistics成港股首單De-SPAC | 2024-11-04 12:51:06
  • 交銀施羅德基金王崇踩雷金域醫學!配置走向喝酒吃藥淨值陷入深淵 | 2024-11-04 12:51:08
  • 美元,突然大跌!離岸人民幣狂飆近300點,特朗普相關資產殺跌,哈里斯選情再度看漲? | 2024-11-04 13:22:59
  • 大漲73%,房企爆發 | 2024-11-04 13:23:01
  • 機器人概念股引爆A股!十餘股漲停,行業龍頭市值暴增 | 2024-11-04 13:23:04
  • 北海市99套房和7棟別墅拍賣,被人4500萬元買下 | 2024-11-04 13:35:34
  • 重磅!個稅扣除範圍擴大!(2024最新最全個稅稅率表) | 2024-11-04 13:35:36
  • 小紅書一細分品類榜首的崛起:復購率已超70%! | 2024-11-04 13:43:25
  • 武漢民營製造業企業“一哥”:營收超400億元,領先美的、周大福 | 2024-11-04 13:43:26
  • 四川首富“劉氏希望家族” | 2024-11-04 14:27:44
  • 剛剛,徹底爆發!發生了什麼? | 2024-11-04 14:44:42
  • 美國政府考慮推動英特爾晶片設計業務與AMD合併 | 2024-11-04 14:44:43
  • 打新!“寧王”核心供應商,來了 | 2024-11-04 14:47:22
最近發布
突發!TVB知名女星毫無預警宣佈與未婚夫分手,結束長達八年情 面對被黑,蘭姐強勢迴歸。小菲狀態好轉,發宣告。更多內幕揭曉! 中國男籃決戰日本隊,首發五人曝光,廣東隊大贏家,徐傑第一後衛 孫穎莎奪女單冠軍!採訪謙遜立足拼,劉國樑給中國選手頒獎笑開花 分析 馬威交易取消後的影響:湖人還有什麼選擇?只能等休賽期? 火箭vs猛龍前瞻:範弗裡特有望復出戰舊主,火箭欲終結六連敗 梅西轟動宏都拉斯!當地媒體:這是世紀體育盛事! 登記開啟!金中、29中、13中等校動了! 開年暴擊!南京又一家機構跑路了? TechInsights:AI PC未能提振筆記本市場 2024年僅增長5% 睡覺時突然腿抽筋,就是缺鈣?錯!還有這4個原因,別輕易忽視了 泡泡瑪特又贏麻了!此前被調侃是“境內最大的博彩公司” 再也不用扎手指!5億糖尿病患者有福了 傳《尼爾:機械紀元》續作、新《古墓麗影》今年公佈 有工作經驗的畫素畫師如何寫簡歷? 離譜!Xun被搶3條龍,JDG仍然獲勝!Peyz力挽狂瀾,WBG痛失好局 將耗死在國際空間站?59歲美滯留女宇航員求救:喪失重要身體機能 華為FreeClip耳機玫瑰金開售 開放式聆聽設計 CBA俱樂部杯-山西淘汰北控晉級4強 原帥18分 小紅書上移民的中產:曾經北京七套房, 羨慕海外一張床, 如今卻...... 不可抗力停課2天以上退一半保教費,佛山幼兒園收費新規釋出 紅棉襯醉美,2020番順醉美青餅評測 華為FreeClip耳夾耳機玫瑰金配色開售:1299元 64歲寧波老闆,跨界無數次,給員工發8億,即將擁有第三家IPO? 卡友資訊股東持股情況變動 廣州“城市合夥人”:城市與人才的雙向奔赴 有人說孫穎莎粉絲是飯圈文化的時候 卻有些人用真金白銀愛孫穎莎! 男生剪“短髮”髮型乾淨利落,試試這3款,剪完帥氣提升顏值! 7個臀部訓練最佳動作,打造迷人的蜜桃臀! 偉大的4-2!林詩棟奪冠:新科世界第1誕生、超越王楚欽,狂攬3冠 新疆完美了!新小外強於皮特森+黑根斯,承認補強大外良性競爭! 林詩棟奪男單冠軍!採訪大談不容易太謙遜,單獨拍照露出笑容! 國乒最新戰報!林詩棟第2局11-8,衝3冠王,梁靖崑救2局點仍輸球 替補奇兵!快船大將5記3分助隊贏球 哈登好幫手 爆冷!北控男籃吊打奪冠大熱門球隊,外援決定比賽的走向 官宣離任,胡明軒宣佈重要決定,廣東宏遠遺憾,杜鋒祝福 又一個賈德松!崔康熙看人很準,魯媒:卡約又要錯過中國聯賽了 劉國樑憔悴!黑眼圈很重,擋住蒯曼被提醒,孫穎莎王楚欽被裁判整 林詩棟逆轉梁靖崑奪冠,成就三冠王,綜合實力更加突出 CBA最新外援註冊資訊,遼籃4人,新疆補充新援,廣東男籃放棄萊斯 大滿貫收官獎金排名:林詩棟三冠60萬第1,孫穎莎第2王曼昱10萬第9 臺灣律師分析大S遺產劃分,S媽要錢得看汪小菲臉色,打臉光頭安排 臺媒曝大S家人鬆手,讓出撫養權給汪小菲,希望馬筱梅善待孩子 二線白酒暴雷,狼真的來了! 搭上比亞迪,自動駕駛獨角獸,利潤大增170%! 炸裂!外資吹響“加倉中國”集結號背後:科技格局重塑與資產重估 這波夢幻西遊副本積分兌換真是血虧,四賜福的山賊值得買嗎? 《星戰亡命之徒》高階美工又回到CDPR 開發《巫師4》 《哪吒2》登陸北美,首映禮現好萊塢!有觀眾哭花眼妝:特效超預期,買票靠搶 曝張蘭被封年損失近4億,麻六記絕地自救太壯觀,員工曬張蘭近況

©2024 時時頭條 版權所有

隱私政策 | 服務條款 | 聯繫我們