聲明:本文來自于微信公眾號深響，授權站長之家轉載發(fā)布。
AI用于影視作品生產，早已不是什么新鮮事。
Netflix早在2023年就發(fā)布了首部AIGC動畫短片《犬與少年》;芒果TV的旅行綜藝《我們仨》啟用AI導演，負責旁白、串場和行程策劃;美國導演哈莫尼·科林運用AI和游戲引擎制作的影片《暴力漂1流》入圍威尼斯電影節(jié)非競賽單元;上海國際電影節(jié)在今年的“SIFF ING青年新銳影像計劃”中特地拆分出AIGC單元，面向全球征集AI制作短片……但大部分影片時長都在10分鐘以內，沒有復雜劇情、主要角色不超過3個，全程用AI制作一部符合院線上映標準的長片，仍是一大考驗。
4月24日，70分鐘長片《海上女王鄭一嫂》在新加坡上映，作為全球首部政府批準走進院線公映的AIGC大電影，這部作品擁有完整故事情節(jié)和流暢的畫面，打破了行業(yè)對于AIGC內容時長的固有印象。
“AI有自己的演技和表達?！币晃滑F場觀眾說:“沒有想到AI能完整地表達一個這么長的故事，而且看到了故事的明線和暗線?！?/p>
靠AI來制作一部長片，當中的挑戰(zhàn)不難想象:劇本體量大、故事線復雜、角色眾多，對AI內容處理能力的要求遠超短片;場面調度復雜且涉及不同鏡頭/景觀視角，但AI很多時候只會生成千篇一律的鏡頭，難以完全表達導演創(chuàng)作想法;大銀幕會放大各種細節(jié)問題，動作不連貫、不同人物“撞臉”、同一角色前后“變臉”等現象都無處遁形……
《海上女王鄭一嫂》制作中遇到的坎一點都不少。在影片于新加坡上映之際，「深響」與其制作方FizzDragon創(chuàng)始人、CEO陳卓展開聊了聊影片背后的故事以及AI技術對于影視行業(yè)真正的變革之處，相信能為正在積極擁抱AI時代的影視行業(yè)，提供一些啟發(fā)。
當AI用于長片:故事、對白、
人物的難題如何各個擊破?
《海上女王鄭一嫂》的人物原型是傳說中巔峰時期指揮大約1800艘船只、統(tǒng)領十萬名海盜的傳奇女海盜“鄭一嫂”，《加勒比海盜》系列的女海盜王“清夫人”也是以這位傳奇女性為藍本創(chuàng)作。
FizzDragon創(chuàng)始人陳卓告訴「深響」，“鄭一嫂”作為一個女性，在男性主導的“海盜帝國”里一步步往上爬、成為“十萬大軍”的統(tǒng)帥，給這段經歷蒙上了更多傳奇色彩，也激起了她的創(chuàng)作興趣。Sora的面世，AI視頻生成成為風口，則讓后面的故事變得順理成章:以沒人嘗試過的AIGC全流程制作方式，拍攝一個同樣罕見的傳奇女性故事，何嘗不是一種致敬?
工科專業(yè)出身、卻一直堅持寫作的陳卓，算是充分發(fā)揮了自己在技術和創(chuàng)作兩方面的專長，讓《海上女王鄭一嫂》項目順利落地。但后面的拍攝進程，遠比想象中復雜?？此茝姶蟮腁I技術，在實際拍攝里仍有許多無法攻克的難點
首先是長對白、長鏡頭的畫面處理問題。一般情況下，AI生成的畫面流暢度、質感沒有太大問題，能維持在一定的水平線上;但一旦涉及到長鏡頭、長對白等信息處理量更大、更考驗鏡頭理解能力的畫面，AI的缺陷就顯露無疑。
陳卓告訴「深響」:“比如一個角色要講一段很長的對白，但鏡頭又不能太枯燥，這時候就不能指望AI能生成一段滿意的長鏡頭，而是要根據導演的要求加一些分鏡頭，豐富整個場面。”更不用說諸如一鏡到底、固定/運動視角長鏡頭、主觀推拉鏡頭等帶有創(chuàng)作者個人烙印的高階手法，對現階段的AI來說還是太過超前。
這背后的癥結，是AI大模型追求數據歸一、程式化的底層處理邏輯，和電影拍攝“作者性”之間的沖突:AI通過大量數據推理、深度學習，得出文本理解-畫面生成的“統(tǒng)一公式”，而每一部電影的鏡頭都帶有創(chuàng)作者自己的特性、氣質，二者從制作原則上就存在沖突。
其次，還有不同人物的“撞臉”與同一人物的“變臉”難題——同一個角色AI“演著演著”長相變了，這是人類演員不可能發(fā)生的事。
陳卓透露，《海上女王鄭一嫂》的角色只有10個左右，其中主角不超過5個，角色數量的設定已經充分考慮AI生成能力，希望盡量避免“撞臉”，同時確保同一角色不會前后“變臉”。但最終呈現的效果，依然無法讓人完全滿意。
為此，FizzDragon團隊只能采取一些人為的補救措施:把人物素材進行拆分，并投喂給AI進行特定訓練，讓系統(tǒng)更深入理解需要生成的人物形象;同時配備一個負責“換臉”的小組，通過后期處理把雷同的人物替換掉，并處理同一角色前后臉型“穿幫”問題。
生成的人物長相過于雷同是AI歷來最受詬病的缺點之一，人物形象無法保持一致的問題，則會在時長更長、角色戲份更重的長片中被放大。從技術上講，前一個問題很大程度上源于AI訓練數據雷同，面對大同小異的臉部特征、形象氣質等人物生成指令，AI工具很難完全避免撞臉現象。此外，還要考慮到倫理、版權歸屬等敏感話題，AI生成的人物不能完全貼近“現實”、有許多顧及，這也對生成效果形成了一定限制。
而人物無法保持一致，則歸咎于AI理解能力的局限性，在影片中，角色需要根據劇情在不同場景變換造型、形象氣質，但AI的文本編碼器語言理解能力仍有缺陷，一旦所接收的生成指令出現變化或誤差，就可能無法完全復現同一人物形象。
對于一部要登上大銀幕的電影來講，這些缺點將被無限放大——如果說鏡頭的處理，影響的是影片質感，代表著審美上限，那么場景、人物生成精細度和統(tǒng)一性，以及可能出現的“穿幫”問題，則是必須嚴格把控的質量底線。針對畫面處理、人物生成這些現階段的AI技術盲點，業(yè)內也沒有統(tǒng)一的解法，只能靠人力靈活應對，后期處理。
事實上，在《海上女王鄭一嫂》的拍攝中，這種需要人與AI合力，或者靠人力為AI兜底的狀況十分普遍。尤其是在劇本創(chuàng)作、分鏡頭劇本處理和后期剪輯等環(huán)節(jié)，人的主導地位更為明顯，遠非AI可以取代。
陳卓表示，《海上女王鄭一嫂》的劇本從一開始就是全靠“人類”團隊創(chuàng)作，并未假借AI之手。在她看來，這既是出于對以人為本的創(chuàng)作原則的尊重、對創(chuàng)造樂趣的維護，同時也有對AI能力的懷疑——對歷史史料的查證，目前的AI就無法做到十分嚴謹專業(yè)，比如AI生成人物身著的服裝不一定就是歷史年代準確的制式。
而在分鏡頭劇本的處理上，團隊雖然曾尋求AI幫助，但效果差強人意。陳卓透露，AI處理的分鏡頭劇本時最大問題是太傳統(tǒng)、缺乏創(chuàng)意和特點，這和長鏡頭生成、長對白處理時出現的問題是相似的。畢竟和劇本文稿一樣，分鏡頭也是創(chuàng)作中的一環(huán)，背后需要人的創(chuàng)意與構思賦予生命力，這些是AI暫時還無法替代的。
其實早在2021年，海馬輕帆就上線了類似“AI編劇”的應用工具，如今像影視公司華策、視頻平臺愛奇藝也都推出了劇本智能創(chuàng)作系統(tǒng)，去年貓眼娛樂還發(fā)布了首個面向長劇本解析的動態(tài)故事板AI生成工具“神筆馬良”。但就目前的應用情況來看，這些嘗試也都處于早期。
此外，在劇本創(chuàng)作中，團隊忽略了一個很關鍵的問題:不同于傳統(tǒng)拍攝技術，AI生成仍有缺陷，不是所有鏡頭都能制作出來。所以團隊只能幾經推倒、重改，把劇本調整到AI能力所及的范圍。
而AI制作和傳統(tǒng)影視拍攝還有一層重要的差異體現在流程上:在傳統(tǒng)拍攝流程里，都是先有劇本，以劇本為主導，搭配所需的人員、技術、設備、場景。更有甚者，諸如詹姆斯·卡梅隆、克里斯托弗·諾蘭、馬丁·斯科塞斯等好萊塢大導，會為了實現自己的劇本構想去開發(fā)原生技術，比如為詹姆斯·卡梅隆團隊為《阿凡達》研發(fā)的實景3D攝影系統(tǒng)。
而在《海上女王鄭一嫂》的拍攝中，人與技術似乎被放到更對等的位置上，成了需要相互磨合、理解的一對“伙伴”。這種關系的轉變，是會成為對創(chuàng)作自由的限制，還是對創(chuàng)造流程的規(guī)范、讓成本和周期變得更可控，相信會在日后的更多實操案例中，成為行業(yè)反復探討、爭論的焦點。
但僅就《海上女王鄭一嫂》的拍攝經驗來看，當AI對的制作介入從單個環(huán)節(jié)轉換到全流程，其實是為導演、編劇們創(chuàng)造了一個更深入理解這項技術的機會，也是緩和人與AI對立氛圍的契機。創(chuàng)作者應當清楚意識到，現階段的AI絕不可能完全取代人的作用，尤其是在創(chuàng)作環(huán)節(jié)，自然也無需將AI視為必須抵制的洪水猛獸;相反，在制作環(huán)節(jié)，如果能善用AI，作用也是不容忽視的:比如降本、提效、調低門檻。
用AI處理大場面，能顯著壓縮成本、提高效率
圖源:《海上女王鄭一嫂》官方預告片
和傳統(tǒng)電影拍攝相比，AI的靈活性是無可比擬的優(yōu)勢。既不需要考慮天氣、演員檔期和表演狀態(tài)這些不可控的客觀因素，也省去了勘景、置景、打光等大量流程，系統(tǒng)在短時間內就能生成大量場景素材，這里面節(jié)省的時間、成本都是肉眼可見的。尤其是對于新入行，資源、經驗欠奉的創(chuàng)作者和團隊而言，AIGC無疑大幅降低了電影拍攝門檻，為年輕團隊提供一條實現抱負的快捷路徑。
陳卓就感慨道，如今的影視文化作品仿佛陷入了重復敘事、套路固化的怪圈，“如果你的創(chuàng)作不符合主流，就很難得到支持?！钡粋€有活力、健康的產業(yè)環(huán)境里，創(chuàng)作者應該有更自由的表達空間。這種背景下，人與AI相互配合，以人為本把控內容質量，借力AI為制作增速提效，才是最合理的路徑。
而在這個磨合過程中，隨著創(chuàng)作者對AI的認識不斷加深，使用經驗的積累，制作效率和效果也會有進一步提升空間。說到底，創(chuàng)作者與AI并非天然對立，當然也絕不是單箭頭寄生依附。二者更應該是互惠互利，共同成長的“親密戰(zhàn)友”。
連點成面、步步深入:
AI如何革新影視生產范式?
《海上女王鄭一嫂》是FizzDragon在電影長片上的一次新嘗試，不過團隊并沒有對影片設置太多商業(yè)目標。陳卓表示，影片盡量在藝術層面做得更好，FizzDragon希望把《海上女王鄭一嫂》當成一張名片，后續(xù)吸引更多人關注FizzDragon、撬動更多資源。
從FizzDragon的布局來看，電影也不是其野心的全部。作為一家追求人類創(chuàng)造力與AI生產力融合的公司，從短劇、文旅到教育，從內容生產到技術培訓，FizzDragon在AIGC+影視文化的賽道上有著廣泛涉獵。
影視內容方面，除了《海上女王鄭一嫂》，FizzDragon還簽約了豆瓣小說作者賈洋，計劃打造AIGC版《孤獨筆記》網劇;短劇方面，除了以《山海經》為藍本的一系列作品，還涉足科幻題材，制作《月球移民地》等項目;文旅項目方面，則和三星堆博物館、浙江非物質文化遺產博物館以及部分高校達成合作;此外，還和覆蓋全球數千家電視臺、全球廣播聯(lián)盟知名公司Athena聯(lián)合開發(fā)針對影視從業(yè)者的AIGC課程、商業(yè)化解決方案……
圍繞AIGC+影視文旅，FizzDragon進行了多方布局
FizzDragon是一個切面，讓外界清晰認識到，AI對影視行業(yè)的滲透已經從分散性走向集約式，從鏡頭生成、輔助拍攝等單個環(huán)節(jié)放大到整個流程、整條產業(yè)鏈，由點成面，對影視工業(yè)產生深刻影響。面對這股不可阻擋的AI潮流，業(yè)內的態(tài)度也逐步轉變，從一開始的絕對抵觸，到冷靜下來審視、了解繼而主動擁抱AI。
一方面，近年來國內國外有許多影片在拍攝中使用了AI技術，影片質量并未因此受到影響，創(chuàng)作團隊倒是收獲了實打實的便利。
捅破華語電影票房天花板的《哪吒2》背后，就站著天工異彩和Base Media等業(yè)內領先的AI視效公司。哪吒在鼎內沖破封印、重塑肉身那場重頭戲，得益于AI對骨骼動力學系統(tǒng)的深度學習能力，才輔助制作出肌肉收縮、皮膚褶皺栩栩如生的視覺效果，就連哪吒毛細血管的崩裂瞬間在大熒幕上都清晰可辨;而片中幾場重點打斗戲，哪吒、敖丙等主角“放大招”時的沖擊力場面，同樣少不了AI粒子模擬等技術的加持。
《哪吒2》當然不是特例。從國內到國外，一大批商業(yè)大片、獨立電影的制作，均已離不開AI元素:
《流浪地球2》借助深度學習、神經網絡和生成對抗網絡等技術“復活”吳孟達、讓年過半百的吳京“重返二十歲”;《只此青綠》通過AIGC制作一個鏡頭只需半天，而常規(guī)技術手段需要一個星期，大大提高制作效率;好萊塢方面，《美國隊長4》用AI工具掃描群眾演員數據用于后期合成、《瘋狂元素城》使用AI模擬片中流體效果、《瞬息全宇宙》用AI來處理特效鏡頭以提高渲染效率、《粗野派》用AI調試演員口音，用途越來越廣泛……
從這些案例中也可以看到，業(yè)內也好，普通觀眾也罷，對經由AI處理的鏡頭也沒有原先這么抵觸。早前，Disney+只是用AI生成劇集《秘密入侵》的片頭，就遭到網友和從業(yè)者的瘋狂抵制;如今，《流浪地球2》、《哪吒2》狂卷票房，《粗野派》、《瞬息全宇宙》橫掃奧斯卡，受到業(yè)內和市場的一致認可。
一眾業(yè)內大咖對AI的態(tài)度，也正是在一系列案例的影響下，悄然發(fā)生轉變。向來走在技術前沿的詹姆斯·卡梅隆，在近日作客一檔播客節(jié)目時對AI在視效處理上的應用前景表示樂觀，認為AI能顯著降低成本，對于追求視覺效果、不愿向時間妥協(xié)又要應對制片方壓力的創(chuàng)作者來說意義重大。
詹姆斯·卡梅隆甚至預判道，如果我們還想看到《沙丘》系列這種大制作、大場面電影，就必須找到削減成本、同時保持質量的方法:那就意味著制作方不能裁撤特效團隊，而是要借助AI提升效率。無獨有偶，陳卓也透露，在《海上女王鄭一嫂》的后期制作中，AI能幫助處理約60%重復性、基礎工作，讓剪輯人員能把時間花在更有價值的工作上。
另一方面，各個互聯(lián)網大廠、影視公司都在加緊開發(fā)各類AI應用，影視工業(yè)的AI基建逐步完善，功能也在持續(xù)迭代、提升。
國內有快手的可靈、字節(jié)的即夢、騰訊的智影等主打視頻生成的AI產品，阿里、百度等大廠旗下的大模型也都支持相應功能;國外有大名鼎鼎的Sora、Runway、Synthetic等應用工具，也誕生了不少像FizzDragon這種專注于AIGC內容制作的工作室，如Fable Studio、Wonder Dynamics。
和當初的“千模大戰(zhàn)”一樣，一開始，大廠的產品先追求廣度，先確保提供基礎功能，并未在技術、功能上做出自己的差異化優(yōu)勢。但隨著時間推移，可以看到大廠逐漸找到發(fā)力點，在特定環(huán)節(jié)挖掘出技術深度，擁有了區(qū)別于同類競品的長板。
陳卓透露，在《海上女王鄭一嫂》的拍攝中，團隊在不同場面的生成中采用不同的AI工具，發(fā)揮對應工具的長處，其中海螺AI的人物演技生成效果更好，Runway生成的大場面質感較佳。
而為了持續(xù)調優(yōu)產品效果，一些大廠也主動邀請創(chuàng)作者參與創(chuàng)作實驗，給出自己的經驗、意見。去年下半年，李少紅、賈樟柯、薛曉路、俞白眉等九位知名導演就加入了“可靈AI導演共創(chuàng)計劃”，使用快手可靈生產AIGC電影短片，有經驗、敢嘗鮮的創(chuàng)作者，都已慢慢摸索出自己的AI工具使用心得，甚至主動加入創(chuàng)作陣營，調試產品效果。
從作品效果和后續(xù)的訪談中可以看出，幾位大導演對AI工具現階段的能力并不是完全滿意。俞白眉就表示，AI對真人動作的還原還較為粗糙。但在實驗過程中，導演們也找到一些靈感，以及在后續(xù)創(chuàng)作持續(xù)優(yōu)化工具的方法。薛曉路就透露，為了讓AI生成的動物更接近真實動態(tài)并保持一致，劇組學會了向系統(tǒng)投喂大量同一個寵物的照片、視頻素材;賈樟柯合作的AIGC創(chuàng)作者則表示，可靈AI使用景深、對焦切換等鏡頭營造的空間感已經達到非常出色的效果。
薛曉路導演使用可靈AI制作的短片
毫無疑問，無論當下還是未來，AI都不可能完全替代人在影視產業(yè)中的作用;也如同數碼、膠片、IMAX等攝影設備一樣，各類AI工具各有精通，很難出現一款各個環(huán)節(jié)都做到極致的集大成產品。但隨著人與AI的磨合不斷加深，創(chuàng)作者會更懂得如何運用AI工具，發(fā)揮對應技術長處，讓后者成為創(chuàng)作質量、制作效率的雙重加持。
總而言之，AI的應用雖不至于說徹底顛覆影視產業(yè)，但必然能給行業(yè)帶來一些新氣象，也為緩解創(chuàng)意枯竭、成本限制、周期不定等一系列難題，提供新的解題思路。
（舉報）