隨著AI動畫短片、MV在各平臺冒頭,AI影片業態正在改變。
回望約一年前,“搞笑”似乎還是AI影片的註腳,AI生成演員威爾·史密斯吃麵條的影片中,人物面容扭曲、動作詭異。近期AI影片卻變了個樣子,一條AI賀歲MV中,小狗著古裝彈奏樂器,動作流暢。AI《西遊記》短片也火了一把,創作者“AI瘋人院”馮彬告訴第一財經記者,近日有很多人前來問詢,其中包括媒體記者,他的時間排得滿滿。
如果是從何時改變談起,創作者“秋芝2046”表示,去年年中工具能做的程度還非常有限,年末釋出的Midjourney V6則在圖片質感和真實度上提升了一大步,SVD和Runway Gen-2也出現了,工具成熟度提升促使她成為創作者。“我抱著AI發展一定會很快的預期,但還是經常覺得太快了。”她表示。
如今,外界關注AI影片的新焦點變成OpenAI的Sora,這個有“世界模型”意味的文生影片模型可直接生成60秒影片,或推動AI影片往前再邁一大步。這又將對影片業態產生什麼影響?
記者瞭解到,與很多人的想象不同,目前生成AI影片還不是“一鍵輸入一鍵輸出”般簡單,最早一批製作精良AI影片的作者靠美術或設計背景入局,但AI工具確實已在圖片與影片相關領域滲透,降低製作門檻。一名影片從業者告訴記者,或許Sora等AI工具並不會完全替代原本的影視行業,而是將構建新業態,形成新的平臺和新的玩法,業界已在構思並躍躍欲試。
AI影片如何面世?
AI《西遊記》影片中,孫悟空從石頭中誕生,巨震引起玉帝注意,在花果山,孫悟空與群猴跳躍,進入水簾洞成為群猴之王,又為尋求長生不老術踏上前往靈臺方寸山之路。畫面中,花果山水簾洞內水流、植物錯落,天庭依山而建,城鎮街景呈現了古代著裝的行人、門樓和商店。該影片在抖音登上熱榜,有超100萬人在看。
創作者馮彬告訴記者,這個影片是先AI繪圖,再透過圖生影片的形式生成。他使用的AI繪圖工具是Midjourney,圖生影片工具是Runway,構思階段採用ChatGPT分析原著並規劃分鏡。其中出圖耗費3天左右,他每天從上午10點多開始工作到隔天凌晨3點左右,出圖三四千張,最後使用不到100個鏡頭,廢片率還是很高,整個影片大概耗費一週。
“要給到AI細緻描述,例如跟AI描述一個蓮花冠,就能出來一個有相關元素的頭冠。圖片符合要求就保留,再生成一張合適的人的圖片,在PS中處理合成。很多圖需要二次處理,工程量還是很大。”馮彬說,AI能生成的內容有限,根據原著,花果山石碑上的字型是楷書,這些字型便是他後期加上的。服飾上,AI能生成中國古代服飾,但細節上,衣襟是左肩搭右肩還是相反,AI不一定準確。從圖片生成AI影片也不是很簡單,如果直接給AI一張圖片,可能猴子的臉會變成人臉,必須給到AI限制。 此外,現在的AI影片中還難以實現合理的大幅度運動,角色間互動效果不盡如人意,需要規避一些對話、打鬥等畫面。
“有一個鏡頭是群猴鼓動下孫悟空往上跳,我向每隻猴子添加了運動筆刷,結果可能有幾隻猴子畫得比較抽象,AI搞不懂情況,做出一些很詭異的動作,有一隻猴子直接跳懸崖裡了,我做了20多次才得到一個適合鏡頭。”馮彬表示。
“秋芝2046”用的是AI繪圖工具Midjourney V6和圖生影片工具SVD和Runway,指令碼階段也採用GPT規劃畫面,並用GPT輔助生成提示詞,以便在Midjourney中獲得滿意的風格,她的AI影片創作過程也不是“一鍵生成”。
“秋芝2046”告訴記者,一個繪圖影象時長在幾分鐘到幾小時之間,取決於畫面複雜度,獲得一段滿意的AI影片可能需要幾個小時,《恭喜發財》MV總時長近2分鐘,她花費了一個多星期製作。“AI繪圖廢片率很高,生成質量通常不穩定,可採納的比例在30%~40%之間。在Midjourney V6出來前,要繪製出滿意的圖片更難,這也是為什麼我一個多月前才開始做AI影片。”“秋芝2046”告訴記者,圖生影片則是5~8條影片中,有一條能夠採用。為生成滿意的圖片或影片需提供詳盡描述,但對於精細化控制仍不穩定。
“秋芝2046”也感受到AI繪圖和圖生影片工具目前的侷限性,她告訴記者,MV中小狗以人的形式出現,AI可能沒有很多相關的訓練集,所以製作難度不小。她希望做不同於國外AIGC內容的嘗試,製作的《花木蘭》預告片難度也偏大,這類中國元素或古裝題材AI模型的訓練集中資料可能較少,可控性也比較差。
馮彬和“秋芝2046”都是在美術或影視上有一定基礎的從業者,馮彬有10餘年影視、遊戲行業技術、美術從業經驗,“秋芝2046”目前是AI創業者和AIGC內容創作者,此前是影視和營銷行業從業者,製作過廣告和獨立電影。
在AI影片工具還存在諸多瑕疵的情況下,創作者的經驗目前還顯得尤為重要。馮彬告訴記者,就算Sora開放使用了,要把影片效果做好,還是從事美術或相關領域的從業者才能做好色彩、構圖、鏡頭銜接、角色站位等。“秋芝2046”也是利用相關從業經驗搭建了一套AI工具工作流,她告訴記者,搭建工作流的門檻並不低,培養跟AI互動的感覺和對語言的理解等也需要成本。
即便有諸多限制,AI工具仍在改變影片業態。馮彬表示,如果不使用AI,畫一個場景可能得一兩星期,大場景甚至要一個月左右。“如果不用AI,《恭喜發財》《花木蘭》預告片這類影片可能不會存在,前者這種非現實又有現實質感的作品從構思、指令碼到渲染等最少需幾個月或一年,取決於團隊體量,後者涉及的鏡頭量和場景對應上億投資電影的素材。”“秋芝2046”表示,Sora直接越過一個量級,明年AIGC內容預計還會成倍增長。
Sora將改變什麼?
“AI繪畫迭代已經越來越快,Sora帶給我的震驚程度還遠遠超過當時AI繪畫的迭代。”馮彬告訴記者。實際上,AI工具已在繪圖上率先滲透,隨著Sora所代表的AI影片快速迭代,AI給影片業態帶來的改變可能更加深刻。
據OpenAI官方技術報告,Sora能很好理解客觀世界的因果邏輯與物理法則。相比Runway等只能生成幾秒或十幾秒影片的AI工具,Sora可生成的連貫影片長度達到60秒。
在AI繪圖層面,AI早已替代部分人工,完成遊戲美術人員部分工作。一名遊戲從業者告訴記者,AI影片目前應用還不多,放大看其實存在瑕疵,未來看,則可能對遊戲中的過場動畫、劇情動畫產生影響,遊戲公司不再需要尋找外包製作。
“AI最佳化流程勢在必行,我在海報概念圖製作上已經開始用AI做了,AI可以在短時間內出圖上百張,對節省前期成本有很大作用,過去還需要一筆預算用於僱傭團隊來做,現在已經有變化了。”影視行業製片人林展(化名)告訴記者,Sora剛剛釋出,這和之前的各類AI工具不一樣,這一次代表AGI(通用人工智慧)突破、世界模型正在形成。Sora的出現、AGI的發展未來還會使影視行業固有的流程模式迎來諸多挑戰,流程工作者等角色面臨被替代的風險,這也引發焦慮,但更多還是把AI當作工具,思想創作永遠不會被替代。
林展告訴記者,影視業中一些雲端或資料端執行類工作可能受到一定影響,如影象方面的畫師、文字記錄、CG(過場動畫)創作,但源頭創作者仍不可或缺,這涉及影視全產業鏈每個模組的人,如編劇、導演、美術指導、攝像指導等創作核心人員,執行人員的體量可能會簡化,但總歸需要下達指令的創作者。
“假設製作拍攝花木蘭飛起來的鏡頭,演員需提前培訓,武術指導需設計動作,拍攝當天還需服裝化妝、場景修建、美術置景、燈光佈置等並使用威亞裝置,反覆多遍得到一個鏡頭,這也導致影視一直是高門檻行業,即便數字攝影機進步、特效行業也有UE5遊戲引擎出現,但內部涉及的具體實現仍低效。AI到來後,相信會幫助創作更好的藝術作品。” “秋芝2046”表示,AI在影視製作各流程都可能滲透,但AI不適合或沒必要用到深度敘事長篇電影、以真實為核心的紀錄片,以及成本極低的手機拍攝短影片等低成本影片,而適合創意性更強、靈活且時長較短的型別,如創意廣告、宣傳片、動畫等。
北京五月風影視文化有限公司導演高希路則告訴記者,他目前主要專注電視劇和電影,還沒有用到AI,目前看,短時間內也不會使用。“對於影視專業講故事的從業者來說,我認為目前AI影片的有效應用幾乎是零,未來大機率只能在技術創作者極少使用,就如現在影視製作中的‘特技’一樣有限使用。”高希路認為,AI對不同型別的作品影響不同,對動畫等作品作用相對更大,對紀錄片等反映現實的作品影響較小。
對從業者而言,“替代”傳統影視製作並非最重要的關鍵詞,AI影片能否帶來新業態或許才是更重要的。馮彬告訴記者,釋出AI影片後,已經有人私下聯絡,有意開展商業合作。“這一波機會有可能不屬於影視行業的人,影視行業賴以生存的體系已經很完善,對影視行業的近期影響也不會很大。根據AI影片做新平臺可能是一個方向,或是以AIGC為主的內容平臺。”一名影片從業者向記者表示。