誰(shuí)才能真正操控AI？

AI是今年的大熱點(diǎn)

在內(nèi)容生產(chǎn)領(lǐng)域，AI成為焦點(diǎn)，許多特別標(biāo)明“由AI生成”的視頻短片，出現(xiàn)在各種網(wǎng)絡(luò)端口，被推送到你的眼前。

AI視頻究竟是怎么做出來(lái)的？

微電影《白蛇傳·江南》是浙江廣電集團(tuán)“智媒果”AI創(chuàng)作大賽（第一季）的金獎(jiǎng)作品。“ZMG部落”請(qǐng)來(lái)主創(chuàng)團(tuán)隊(duì)主要成員、來(lái)自浙江衛(wèi)視（中國(guó)藍(lán)新平臺(tái)）的馮京，講述創(chuàng)作過(guò)程，分享創(chuàng)作感悟。

無(wú)論對(duì)AI創(chuàng)作者，還是僅僅對(duì)AI創(chuàng)作感興趣的朋友，都值得看看。

選題初衷

此次AI大賽，集團(tuán)推出“江南”“文化中國(guó)行”“新質(zhì)生產(chǎn)力”“二創(chuàng)”四個(gè)主題。我是土生土長(zhǎng)的江南人，當(dāng)時(shí)一眼就相中了“江南”這個(gè)主題。

此片根據(jù)馮夢(mèng)龍《警世通言》第二十八卷《白娘子永鎮(zhèn)雷峰塔》改編，為家喻戶曉的愛情傳說(shuō)故事。改編的原因之一就是因?yàn)椤毒劳ㄑ浴返淖髡呤敲鞒奈膶W(xué)家、戲曲家、思想家馮夢(mèng)龍，他與浙江有相當(dāng)深厚的淵源，也是我的本家。借助《警世通言》，我的創(chuàng)作激情提升了好幾個(gè)level。今年也是我們家喻戶曉的《新白娘子傳奇》主創(chuàng)30周年重聚，以此片致敬兒時(shí)的神劇。

此片以微電影形式展現(xiàn)了經(jīng)典的白娘子水漫金山的片段以及江南文化的獨(dú)特韻味。其中《白娘子永鎮(zhèn)雷峰塔》作為銜接片頭和水漫金山的推手，順利地將最經(jīng)典的“水漫金山”情節(jié)引入其間，兩個(gè)核心故事點(diǎn)在此片中逐一展開，讓人不感到突兀，這也許是一種小小的創(chuàng)新。

AI 創(chuàng)作的瓶頸

整條短片，其視頻音頻基本上都用AI完成，包括劇情方面。

AI不僅僅是視頻模型，不同的AI大模型還可以在不同的場(chǎng)景下使用。例如劇情方面，可以用文心一言來(lái)獲取《警世通言》中的大量?jī)?nèi)容，也可以獲取最初的劇本雛形，但AI畢竟只是工具，可以給人類靈感，但不能替代人類，要讓劇情蘊(yùn)含靈魂，還得人力介入。

創(chuàng)作過(guò)程中，最大的困難是片中角色的創(chuàng)建，也是AI大模型現(xiàn)階段存在的最大瓶頸。

例如文生圖大模型，在創(chuàng)作中國(guó)神話系列圖像時(shí)，人物的角色一致性表現(xiàn)得不盡如人意，特別是在中國(guó)古代的冷兵器繪制方面也是一個(gè)巨大的盲區(qū)，也許與大模型及其訓(xùn)練素材有關(guān)，是西方生產(chǎn)的大模型“不服水土”。

文生圖，是將角色建立以及分鏡圖完成，那么接下來(lái)就是圖生視頻的流程。

這個(gè)流程中，翻車最多的當(dāng)數(shù)圖生視頻功能。人物動(dòng)作姿態(tài)的扭曲，物理運(yùn)動(dòng)軌跡的正確性，又或是生成的結(jié)果完全與提示詞不符等等。

在整個(gè)制作過(guò)程中，翻車畫面層出不窮，亦是樂趣所在，讓我哭笑不得。AI創(chuàng)作就像一個(gè)奔放的熊孩子，阻止不了它那“放肆”的步伐。比如，樹葉失去了地心引力，仿佛看見了“三體”；海水漸漸地變成了云霧，不知道這是在天上還是在海里；美麗的白素貞的臉嚴(yán)重扭曲，與原畫不符；時(shí)間似乎靜止下來(lái)，海水按下了“暫停鍵”……

諸如此類的翻車現(xiàn)場(chǎng)多到離譜，所幸隨著大模型的不斷迭代，翻車概率也越來(lái)越少了。

創(chuàng)作感悟

通過(guò)AI的實(shí)踐運(yùn)用，會(huì)發(fā)現(xiàn)AI不能完全照著你的想法精確地呈現(xiàn)出來(lái)，這個(gè)時(shí)候便需要自身的傳統(tǒng)功底。例如左圖，并非由大模型直接生成，而是通過(guò)生成的兩張圖使用Photoshop進(jìn)行了合成，從而達(dá)到最終想要的效果。

比如，白素貞變身白蛇水漫金山的畫面，是將蛇頭和海浪合成之后才達(dá)到了滿意的效果；而法海與神龜?shù)耐虍嬅妫婚_始一直畫不出神龜巨大的身軀，但通過(guò)提示詞的改變，最終生成了滿意的結(jié)果。

自然界龜?shù)姆N類繁多，而陸龜是世界上最大的龜類，將提示詞修改為“中國(guó)神話神獸級(jí)別的陸龜，震撼的、史詩(shī)級(jí)的、與電影《環(huán)太平洋》一樣的視覺效果”，如此在生成三遍后，就得到了圖中的龐然大物。因此，AI實(shí)踐應(yīng)用中，構(gòu)建提示詞至關(guān)重要。提示詞需要靈活運(yùn)用，繞開固定的思維，也許會(huì)達(dá)到自己滿意的效果。

本片的結(jié)尾所使用的鏡頭，其實(shí)是網(wǎng)絡(luò)上找的，大模型無(wú)法畫出真正的西湖。巧用一些無(wú)版權(quán)的免費(fèi)圖片資源，然后再使用圖生視頻大模型來(lái)生成視頻片段，也能呈現(xiàn)出想要的畫面，可謂是“條條大路通羅馬”。

特別是在制作神話色彩權(quán)重高的 AI短片中，應(yīng)該大膽去想象自己的提示詞，不怕做不到，只怕想不到。文生圖大模型會(huì)時(shí)不時(shí)給你一些驚喜。比如法海某個(gè)鏡頭圖的提示詞是：A monk lifting a golden staff above his head surrounded.

未來(lái)與展望

《白蛇傳·江南》之后，我們又創(chuàng)作出了更多展現(xiàn)中國(guó)優(yōu)秀傳統(tǒng)文化的精品AI短片：《牛郎織女》已經(jīng)制作完成發(fā)布，同時(shí)還有中秋特輯《嫦娥奔月》和國(guó)慶特輯《英雄》。

隨著技術(shù)不斷提升，短片的品質(zhì)也將不斷提升。

AI的發(fā)展是無(wú)止境的，這印證了一句老話：“活到老，學(xué)到老”，技術(shù)的迭代在轉(zhuǎn)瞬之間。從最初的繪圖，到大家俗稱的“動(dòng)態(tài)PPT”，又到目前以假亂真的Runway gen-3、可靈AI、LUMA AI 質(zhì)的飛躍，僅僅半年時(shí)間。在這半年之中，我每天起床的第一件事，就是搜索是否有新的大模型更新了。杜絕信息差，積極擁抱變化，應(yīng)該是一個(gè)AI創(chuàng)作者的基本素養(yǎng)。

未來(lái)，AI不會(huì)淘汰熱愛專業(yè)的人類，也只有癡迷于專業(yè)的人類才能真正操控AI。