??深響原創(chuàng) · 作者｜林之柏
AI用于影視作品生產(chǎn)，早已不是什么新鮮事。
Netflix早在2023年就發(fā)布了首部AIGC動畫短片《犬與少年》；芒果TV的旅行綜藝《我們仨》啟用AI導(dǎo)演，負(fù)責(zé)旁白、串場和行程策劃；美國導(dǎo)演哈莫尼·科林運(yùn)用AI和游戲引擎制作的影片《暴力漂1流》入圍威尼斯電影節(jié)非競賽單元；上海國際電影節(jié)在今年的“SIFF ING青年新銳影像計劃”中特地拆分出AIGC單元，面向全球征集AI制作短片……但大部分影片時長都在10分鐘以內(nèi)，沒有復(fù)雜劇情、主要角色不超過3個，全程用AI制作一部符合院線上映標(biāo)準(zhǔn)的長片，仍是一大考驗。
4月24日，70分鐘長片《海上女王鄭一嫂》在新加坡上映，作為全球首部政府批準(zhǔn)走進(jìn)院線公映的AIGC大電影，這部作品擁有完整故事情節(jié)和流暢的畫面，打破了行業(yè)對于AIGC內(nèi)容時長的固有印象。
“AI有自己的演技和表達(dá)?！币晃滑F(xiàn)場觀眾說：“沒有想到AI能完整地表達(dá)一個這么長的故事，而且看到了故事的明線和暗線?！?/p>
靠AI來制作一部長片，當(dāng)中的挑戰(zhàn)不難想象：劇本體量大、故事線復(fù)雜、角色眾多，對AI內(nèi)容處理能力的要求遠(yuǎn)超短片；場面調(diào)度復(fù)雜且涉及不同鏡頭/景觀視角，但AI很多時候只會生成千篇一律的鏡頭，難以完全表達(dá)導(dǎo)演創(chuàng)作想法；大銀幕會放大各種細(xì)節(jié)問題，動作不連貫、不同人物“撞臉”、同一角色前后“變臉”等現(xiàn)象都無處遁形……
《海上女王鄭一嫂》制作中遇到的坎一點都不少。在影片于新加坡上映之際，「深響」與其制作方FizzDragon創(chuàng)始人、CEO陳卓展開聊了聊影片背后的故事以及AI技術(shù)對于影視行業(yè)真正的變革之處，相信能為正在積極擁抱AI時代的影視行業(yè)，提供一些啟發(fā)。
當(dāng)AI用于長片：故事、對白、人物的難題如何各個擊破？
《海上女王鄭一嫂》的人物原型是傳說中巔峰時期指揮大約1800艘船只、統(tǒng)領(lǐng)十萬名海盜的傳奇女海盜“鄭一嫂”，《加勒比海盜》系列的女海盜王“清夫人”也是以這位傳奇女性為藍(lán)本創(chuàng)作。
FizzDragon創(chuàng)始人陳卓告訴「深響」，“鄭一嫂”作為一個女性，在男性主導(dǎo)的“海盜帝國”里一步步往上爬、成為“十萬大軍”的統(tǒng)帥，給這段經(jīng)歷蒙上了更多傳奇色彩，也激起了她的創(chuàng)作興趣。Sora的面世，AI視頻生成成為風(fēng)口，則讓后面的故事變得順理成章：以沒人嘗試過的AIGC全流程制作方式，拍攝一個同樣罕見的傳奇女性故事，何嘗不是一種致敬？
工科專業(yè)出身、卻一直堅持寫作的陳卓，算是充分發(fā)揮了自己在技術(shù)和創(chuàng)作兩方面的專長，讓《海上女王鄭一嫂》項目順利落地。但后面的拍攝進(jìn)程，遠(yuǎn)比想象中復(fù)雜。看似強(qiáng)大的AI技術(shù)，在實際拍攝里仍有許多無法攻克的難點。
《海上女王鄭一嫂》登陸院線
首先是長對白、長鏡頭的畫面處理問題。一般情況下，AI生成的畫面流暢度、質(zhì)感沒有太大問題，能維持在一定的水平線上；但一旦涉及到長鏡頭、長對白等信息處理量更大、更考驗鏡頭理解能力的畫面，AI的缺陷就顯露無疑。
陳卓告訴「深響」：“比如一個角色要講一段很長的對白，但鏡頭又不能太枯燥，這時候就不能指望AI能生成一段滿意的長鏡頭，而是要根據(jù)導(dǎo)演的要求加一些分鏡頭，豐富整個場面?！备挥谜f諸如一鏡到底、固定/運(yùn)動視角長鏡頭、主觀推拉鏡頭等帶有創(chuàng)作者個人烙印的高階手法，對現(xiàn)階段的AI來說還是太過超前。
這背后的癥結(jié)，是AI大模型追求數(shù)據(jù)歸一、程式化的底層處理邏輯，和電影拍攝“作者性”之間的沖突：AI通過大量數(shù)據(jù)推理、深度學(xué)習(xí)，得出文本理解-畫面生成的“統(tǒng)一公式”，而每一部電影的鏡頭都帶有創(chuàng)作者自己的特性、氣質(zhì)，二者從制作原則上就存在沖突。
其次，還有不同人物的“撞臉”與同一人物的“變臉”難題——同一個角色AI“演著演著”長相變了，這是人類演員不可能發(fā)生的事。
陳卓透露，《海上女王鄭一嫂》的角色只有10個左右，其中主角不超過5個，角色數(shù)量的設(shè)定已經(jīng)充分考慮AI生成能力，希望盡量避免“撞臉”，同時確保同一角色不會前后“變臉”。但最終呈現(xiàn)的效果，依然無法讓人完全滿意。
為此，F(xiàn)izzDragon團(tuán)隊只能采取一些人為的補(bǔ)救措施：把人物素材進(jìn)行拆分，并投喂給AI進(jìn)行特定訓(xùn)練，讓系統(tǒng)更深入理解需要生成的人物形象；同時配備一個負(fù)責(zé)“換臉”的小組，通過后期處理把雷同的人物替換掉，并處理同一角色前后臉型“穿幫”問題。
生成的人物長相過于雷同是AI歷來最受詬病的缺點之一，人物形象無法保持一致的問題，則會在時長更長、角色戲份更重的長片中被放大。從技術(shù)上講，前一個問題很大程度上源于AI訓(xùn)練數(shù)據(jù)雷同，面對大同小異的臉部特征、形象氣質(zhì)等人物生成指令，AI工具很難完全避免撞臉現(xiàn)象。此外，還要考慮到倫理、版權(quán)歸屬等敏感話題，AI生成的人物不能完全貼近“現(xiàn)實”、有許多顧及，這也對生成效果形成了一定限制。
而人物無法保持一致，則歸咎于AI理解能力的局限性，在影片中，角色需要根據(jù)劇情在不同場景變換造型、形象氣質(zhì)，但AI的文本編碼器語言理解能力仍有缺陷，一旦所接收的生成指令出現(xiàn)變化或誤差，就可能無法完全復(fù)現(xiàn)同一人物形象。
對于一部要登上大銀幕的電影來講，這些缺點將被無限放大——如果說鏡頭的處理，影響的是影片質(zhì)感，代表著審美上限，那么場景、人物生成精細(xì)度和統(tǒng)一性，以及可能出現(xiàn)的“穿幫”問題，則是必須嚴(yán)格把控的質(zhì)量底線。針對畫面處理、人物生成這些現(xiàn)階段的AI技術(shù)盲點，業(yè)內(nèi)也沒有統(tǒng)一的解法，只能靠人力靈活應(yīng)對，后期處理。
圖源：《海上女王鄭一嫂》官方預(yù)告片
事實上，在《海上女王鄭一嫂》的拍攝中，這種需要人與AI合力，或者靠人力為AI兜底的狀況十分普遍。尤其是在劇本創(chuàng)作、分鏡頭劇本處理和后期剪輯等環(huán)節(jié)，人的主導(dǎo)地位更為明顯，遠(yuǎn)非AI可以取代。
陳卓表示，《海上女王鄭一嫂》的劇本從一開始就是全靠“人類”團(tuán)隊創(chuàng)作，并未假借AI之手。在她看來，這既是出于對以人為本的創(chuàng)作原則的尊重、對創(chuàng)造樂趣的維護(hù)，同時也有對AI能力的懷疑——對歷史史料的查證，目前的AI就無法做到十分嚴(yán)謹(jǐn)專業(yè)，比如AI生成人物身著的服裝不一定就是歷史年代準(zhǔn)確的制式。
而在分鏡頭劇本的處理上，團(tuán)隊雖然曾尋求AI幫助，但效果差強(qiáng)人意。陳卓透露，AI處理的分鏡頭劇本時最大問題是太傳統(tǒng)、缺乏創(chuàng)意和特點，這和長鏡頭生成、長對白處理時出現(xiàn)的問題是相似的。畢竟和劇本文稿一樣，分鏡頭也是創(chuàng)作中的一環(huán)，背后需要人的創(chuàng)意與構(gòu)思賦予生命力，這些是AI暫時還無法替代的。
其實早在2021年，海馬輕帆就上線了類似“AI編劇”的應(yīng)用工具，如今像影視公司華策、視頻平臺愛奇藝也都推出了劇本智能創(chuàng)作系統(tǒng)，去年貓眼娛樂還發(fā)布了首個面向長劇本解析的動態(tài)故事板AI生成工具“神筆馬良”。但就目前的應(yīng)用情況來看，這些嘗試也都處于早期。
此外，在劇本創(chuàng)作中，團(tuán)隊忽略了一個很關(guān)鍵的問題：不同于傳統(tǒng)拍攝技術(shù)，AI生成仍有缺陷，不是所有鏡頭都能制作出來。所以團(tuán)隊只能幾經(jīng)推倒、重改，把劇本調(diào)整到AI能力所及的范圍。
而AI制作和傳統(tǒng)影視拍攝還有一層重要的差異體現(xiàn)在流程上：在傳統(tǒng)拍攝流程里，都是先有劇本，以劇本為主導(dǎo)，搭配所需的人員、技術(shù)、設(shè)備、場景。更有甚者，諸如詹姆斯·卡梅隆、克里斯托弗·諾蘭、馬丁·斯科塞斯等好萊塢大導(dǎo)，會為了實現(xiàn)自己的劇本構(gòu)想去開發(fā)原生技術(shù)，比如為詹姆斯·卡梅隆團(tuán)隊為《阿凡達(dá)》研發(fā)的實景3D攝影系統(tǒng)。
而在《海上女王鄭一嫂》的拍攝中，人與技術(shù)似乎被放到更對等的位置上，成了需要相互磨合、理解的一對“伙伴”。這種關(guān)系的轉(zhuǎn)變，是會成為對創(chuàng)作自由的限制，還是對創(chuàng)造流程的規(guī)范、讓成本和周期變得更可控，相信會在日后的更多實操案例中，成為行業(yè)反復(fù)探討、爭論的焦點。
但僅就《海上女王鄭一嫂》的拍攝經(jīng)驗來看，當(dāng)AI對的制作介入從單個環(huán)節(jié)轉(zhuǎn)換到全流程，其實是為導(dǎo)演、編劇們創(chuàng)造了一個更深入理解這項技術(shù)的機(jī)會，也是緩和人與AI對立氛圍的契機(jī)。創(chuàng)作者應(yīng)當(dāng)清楚意識到，現(xiàn)階段的AI絕不可能完全取代人的作用，尤其是在創(chuàng)作環(huán)節(jié)，自然也無需將AI視為必須抵制的洪水猛獸；相反，在制作環(huán)節(jié)，如果能善用AI，作用也是不容忽視的：比如降本、提效、調(diào)低門檻。
用AI處理大場面，能顯著壓縮成本、提高效率 圖源：《海上女王鄭一嫂》官方預(yù)告片
和傳統(tǒng)電影拍攝相比，AI的靈活性是無可比擬的優(yōu)勢。既不需要考慮天氣、演員檔期和表演狀態(tài)這些不可控的客觀因素，也省去了勘景、置景、打光等大量流程，系統(tǒng)在短時間內(nèi)就能生成大量場景素材，這里面節(jié)省的時間、成本都是肉眼可見的。尤其是對于新入行，資源、經(jīng)驗欠奉的創(chuàng)作者和團(tuán)隊而言，AIGC無疑大幅降低了電影拍攝門檻，為年輕團(tuán)隊提供一條實現(xiàn)抱負(fù)的快捷路徑。
陳卓就感慨道，如今的影視文化作品仿佛陷入了重復(fù)敘事、套路固化的怪圈，“如果你的創(chuàng)作不符合主流，就很難得到支持?！钡粋€有活力、健康的產(chǎn)業(yè)環(huán)境里，創(chuàng)作者應(yīng)該有更自由的表達(dá)空間。這種背景下，人與AI相互配合，以人為本把控內(nèi)容質(zhì)量，借力AI為制作增速提效，才是最合理的路徑。
而在這個磨合過程中，隨著創(chuàng)作者對AI的認(rèn)識不斷加深，使用經(jīng)驗的積累，制作效率和效果也會有進(jìn)一步提升空間。說到底，創(chuàng)作者與AI并非天然對立，當(dāng)然也絕不是單箭頭寄生依附。二者更應(yīng)該是互惠互利，共同成長的“親密戰(zhàn)友”。
連點成面、步步深入：AI如何革新影視生產(chǎn)范式？
《海上女王鄭一嫂》是FizzDragon在電影長片上的一次新嘗試，不過團(tuán)隊并沒有對影片設(shè)置太多商業(yè)目標(biāo)。陳卓表示，影片盡量在藝術(shù)層面做得更好，F(xiàn)izzDragon希望把《海上女王鄭一嫂》當(dāng)成一張名片，后續(xù)吸引更多人關(guān)注FizzDragon、撬動更多資源。
從FizzDragon的布局來看，電影也不是其野心的全部。作為一家追求人類創(chuàng)造力與AI生產(chǎn)力融合的公司，從短劇、文旅到教育，從內(nèi)容生產(chǎn)到技術(shù)培訓(xùn)，F(xiàn)izzDragon在AIGC+影視文化的賽道上有著廣泛涉獵。
影視內(nèi)容方面，除了《海上女王鄭一嫂》，F(xiàn)izzDragon還簽約了豆瓣小說作者賈洋，計劃打造AIGC版《孤獨筆記》網(wǎng)劇；短劇方面，除了以《山海經(jīng)》為藍(lán)本的一系列作品，還涉足科幻題材，制作《月球移民地》等項目；文旅項目方面，則和三星堆博物館、浙江非物質(zhì)文化遺產(chǎn)博物館以及部分高校達(dá)成合作；此外，還和覆蓋全球數(shù)千家電視臺、全球廣播聯(lián)盟知名公司Athena聯(lián)合開發(fā)針對影視從業(yè)者的AIGC課程、商業(yè)化解決方案……
圍繞AIGC+影視文旅，F(xiàn)izzDragon進(jìn)行了多方布局
FizzDragon是一個切面，讓外界清晰認(rèn)識到，AI對影視行業(yè)的滲透已經(jīng)從分散性走向集約式，從鏡頭生成、輔助拍攝等單個環(huán)節(jié)放大到整個流程、整條產(chǎn)業(yè)鏈，由點成面，對影視工業(yè)產(chǎn)生深刻影響。面對這股不可阻擋的AI潮流，業(yè)內(nèi)的態(tài)度也逐步轉(zhuǎn)變，從一開始的絕對抵觸，到冷靜下來審視、了解繼而主動擁抱AI。
一方面，近年來國內(nèi)國外有許多影片在拍攝中使用了AI技術(shù)，影片質(zhì)量并未因此受到影響，創(chuàng)作團(tuán)隊倒是收獲了實打?qū)嵉谋憷?/strong>
捅破華語電影票房天花板的《哪吒2》背后，就站著天工異彩和Base Media等業(yè)內(nèi)領(lǐng)先的AI視效公司。哪吒在鼎內(nèi)沖破封印、重塑肉身那場重頭戲，得益于AI對骨骼動力學(xué)系統(tǒng)的深度學(xué)習(xí)能力，才輔助制作出肌肉收縮、皮膚褶皺栩栩如生的視覺效果，就連哪吒毛細(xì)血管的崩裂瞬間在大熒幕上都清晰可辨；而片中幾場重點打斗戲，哪吒、敖丙等主角“放大招”時的沖擊力場面，同樣少不了AI粒子模擬等技術(shù)的加持。
《哪吒2》當(dāng)然不是特例。從國內(nèi)到國外，一大批商業(yè)大片、獨立電影的制作，均已離不開AI元素：
《流浪地球2》借助深度學(xué)習(xí)、神經(jīng)網(wǎng)絡(luò)和生成對抗網(wǎng)絡(luò)等技術(shù)“復(fù)活”吳孟達(dá)、讓年過半百的吳京“重返二十歲”；《只此青綠》通過AIGC制作一個鏡頭只需半天，而常規(guī)技術(shù)手段需要一個星期，大大提高制作效率；好萊塢方面，《美國隊長4》用AI工具掃描群眾演員數(shù)據(jù)用于后期合成、《瘋狂元素城》使用AI模擬片中流體效果、《瞬息全宇宙》用AI來處理特效鏡頭以提高渲染效率、《粗野派》用AI調(diào)試演員口音，用途越來越廣泛……
中外多部大片都在制作中使用了AI技術(shù)
從這些案例中也可以看到，業(yè)內(nèi)也好，普通觀眾也罷，對經(jīng)由AI處理的鏡頭也沒有原先這么抵觸。早前，Disney+只是用AI生成劇集《秘密入侵》的片頭，就遭到網(wǎng)友和從業(yè)者的瘋狂抵制；如今，《流浪地球2》、《哪吒2》狂卷票房，《粗野派》、《瞬息全宇宙》橫掃奧斯卡，受到業(yè)內(nèi)和市場的一致認(rèn)可。
一眾業(yè)內(nèi)大咖對AI的態(tài)度，也正是在一系列案例的影響下，悄然發(fā)生轉(zhuǎn)變。向來走在技術(shù)前沿的詹姆斯·卡梅隆，在近日作客一檔播客節(jié)目時對AI在視效處理上的應(yīng)用前景表示樂觀，認(rèn)為AI能顯著降低成本，對于追求視覺效果、不愿向時間妥協(xié)又要應(yīng)對制片方壓力的創(chuàng)作者來說意義重大。
詹姆斯·卡梅隆甚至預(yù)判道，如果我們還想看到《沙丘》系列這種大制作、大場面電影，就必須找到削減成本、同時保持質(zhì)量的方法：那就意味著制作方不能裁撤特效團(tuán)隊，而是要借助AI提升效率。無獨有偶，陳卓也透露，在《海上女王鄭一嫂》的后期制作中，AI能幫助處理約60%重復(fù)性、基礎(chǔ)工作，讓剪輯人員能把時間花在更有價值的工作上。
另一方面，各個互聯(lián)網(wǎng)大廠、影視公司都在加緊開發(fā)各類AI應(yīng)用，影視工業(yè)的AI基建逐步完善，功能也在持續(xù)迭代、提升。
國內(nèi)有快手的可靈、字節(jié)的即夢、騰訊的智影等主打視頻生成的AI產(chǎn)品，阿里、百度等大廠旗下的大模型也都支持相應(yīng)功能；國外有大名鼎鼎的Sora、Runway、Synthetic等應(yīng)用工具，也誕生了不少像FizzDragon這種專注于AIGC內(nèi)容制作的工作室，如Fable Studio、Wonder Dynamics。
和當(dāng)初的“千模大戰(zhàn)”一樣，一開始，大廠的產(chǎn)品先追求廣度，先確保提供基礎(chǔ)功能，并未在技術(shù)、功能上做出自己的差異化優(yōu)勢。但隨著時間推移，可以看到大廠逐漸找到發(fā)力點，在特定環(huán)節(jié)挖掘出技術(shù)深度，擁有了區(qū)別于同類競品的長板。
陳卓透露，在《海上女王鄭一嫂》的拍攝中，團(tuán)隊在不同場面的生成中采用不同的AI工具，發(fā)揮對應(yīng)工具的長處，其中海螺AI的人物演技生成效果更好，Runway生成的大場面質(zhì)感較佳。
而為了持續(xù)調(diào)優(yōu)產(chǎn)品效果，一些大廠也主動邀請創(chuàng)作者參與創(chuàng)作實驗，給出自己的經(jīng)驗、意見。去年下半年，李少紅、賈樟柯、薛曉路、俞白眉等九位知名導(dǎo)演就加入了“可靈AI導(dǎo)演共創(chuàng)計劃”，使用快手可靈生產(chǎn)AIGC電影短片，有經(jīng)驗、敢嘗鮮的創(chuàng)作者，都已慢慢摸索出自己的AI工具使用心得，甚至主動加入創(chuàng)作陣營，調(diào)試產(chǎn)品效果。
從作品效果和后續(xù)的訪談中可以看出，幾位大導(dǎo)演對AI工具現(xiàn)階段的能力并不是完全滿意。俞白眉就表示，AI對真人動作的還原還較為粗糙。但在實驗過程中，導(dǎo)演們也找到一些靈感，以及在后續(xù)創(chuàng)作持續(xù)優(yōu)化工具的方法。薛曉路就透露，為了讓AI生成的動物更接近真實動態(tài)并保持一致，劇組學(xué)會了向系統(tǒng)投喂大量同一個寵物的照片、視頻素材；賈樟柯合作的AIGC創(chuàng)作者則表示，可靈AI使用景深、對焦切換等鏡頭營造的空間感已經(jīng)達(dá)到非常出色的效果。
薛曉路導(dǎo)演使用可靈AI制作的短片
毫無疑問，無論當(dāng)下還是未來，AI都不可能完全替代人在影視產(chǎn)業(yè)中的作用；也如同數(shù)碼、膠片、IMAX等攝影設(shè)備一樣，各類AI工具各有精通，很難出現(xiàn)一款各個環(huán)節(jié)都做到極致的集大成產(chǎn)品。但隨著人與AI的磨合不斷加深，創(chuàng)作者會更懂得如何運(yùn)用AI工具，發(fā)揮對應(yīng)技術(shù)長處，讓后者成為創(chuàng)作質(zhì)量、制作效率的雙重加持。
總而言之，AI的應(yīng)用雖不至于說徹底顛覆影視產(chǎn)業(yè)，但必然能給行業(yè)帶來一些新氣象，也為緩解創(chuàng)意枯竭、成本限制、周期不定等一系列難題，提供新的解題思路。
熱門跟貼