柯同舟
人工智能(AI)是指由計算機系統(tǒng)或機器執(zhí)行的智能行為,如學(xué)習(xí)、推理、感知、創(chuàng)造等。數(shù)字舞美(Digital Stage Art)是指利用數(shù)字技術(shù)和多媒體手段,為舞臺表演創(chuàng)造視覺效果和藝術(shù)氛圍的一種藝術(shù)形式。近年來,人工智能在數(shù)字舞美上的應(yīng)用越來越廣泛,為舞臺藝術(shù)帶來了新的可能性和挑戰(zhàn)。
人工智能和深度學(xué)習(xí)在數(shù)字舞美藝術(shù)和創(chuàng)意領(lǐng)域已有許多應(yīng)用和發(fā)展,通過一些使用神經(jīng)網(wǎng)絡(luò)作為媒介的人工智能工具,分析人工智能在數(shù)字舞美中的實際應(yīng)用案例,可以設(shè)想AI未來在數(shù)字舞美領(lǐng)域中的前景,理解并接受AI作為數(shù)字舞美藝術(shù)創(chuàng)作的有力工具。比如獲得了科羅拉多州博覽會美術(shù)比賽“數(shù)字藝術(shù)/數(shù)字處理攝影”類別的一等獎的圖片《太空歌劇院》,圖片是由人工智能制作完成,需要人工輸入一些提示詞,如風(fēng)格、配色、場景描述。AI將會生成一系列圖片,然后根據(jù)要求進一步修改,直到構(gòu)建出滿足要求的場景。再如,英偉達GTC2023發(fā)布會片頭音樂《IAMAI》是由一個名為“AIVA”的人工智能制作完成,倫敦交響樂團專門為此錄制了交響樂版本。完成這個作品,同樣需要輸入一些提示詞,如節(jié)奏、速度、調(diào)性、配器、風(fēng)格等。AI會根據(jù)要求制作音樂并且生成MIDI文件,而后可在音頻工作站中修改細(xì)化。
一、人工智能生成的數(shù)字舞美內(nèi)容
人工智能可以通過學(xué)習(xí)大量的數(shù)據(jù),生成各種類型和風(fēng)格的數(shù)字舞美內(nèi)容,如圖像、視頻、音樂、文字等。例如, Midjourney是一個基于深度學(xué)習(xí)的網(wǎng)站,利用人工智能生成圖像,讓用戶可以通過輸入文字來創(chuàng)造和分享各種各樣的畫作。又如,[Magenta]是一個由谷歌開發(fā)的項目,旨在使用機器學(xué)習(xí)創(chuàng)造音樂和視覺藝術(shù)。[GPT-4]是一個由OpenAI開發(fā)的強大的自然語言生成模型,可以根據(jù)給定的文本或圖片,生成連貫和有意義的文字。這些人工智能生成的數(shù)字舞美內(nèi)容,可以為舞臺表演提供豐富和多樣的素材,激發(fā)創(chuàng)作者和觀眾的想象力與創(chuàng)造力。同時,也可以降低數(shù)字舞美制作的成本和難度,讓更多的人參與到數(shù)字舞美的創(chuàng)作和欣賞中來。
二、人工智能在數(shù)字舞美上的具體應(yīng)用
(一)舞美概念圖。利用Midjourny等AI制圖軟件,輸入提示詞:舞臺尺寸、整體風(fēng)格、燈光等,就能生成一系列的概念圖。如果不知道如何寫提示詞,那么可以通過Chatgpt獲得幫助。例如,可以在Chatgpt提問:我想做一個唯美的、模擬水下的舞臺概念場景,請你幫我描述一下。Chatgpt回答:“這是一個舞臺的概念設(shè)計。空間描繪了一條平靜而浪漫的河流,水滴仿佛變成了音符,水波變成了聲波。樹葉沉入河中,形成美麗的漣漪,逐漸擴散和消失。魚兒游過。夢幻般的風(fēng)景,戲劇性的燈光,煙霧和迷霧。”把上述文字復(fù)制進midjourney里,再輸入一些參數(shù),例如:明暗對比、電影級別的燈光、8k、超高細(xì)節(jié)、大師級作品等,于是得出這樣一張圖:
毫無疑問,這一概念圖給予舞美設(shè)計師大量靈感,甚至完全可以直接運用到真實的舞美搭建中。通過這種多個AI聯(lián)動,可以將以前只能在腦海中構(gòu)建的場景于現(xiàn)實中展現(xiàn)。
(二)視頻素材批量設(shè)計。晚會類項目往往會配合節(jié)目設(shè)計相應(yīng)的大屏數(shù)字舞美效果,而視頻在其中占了很大的比重。在一些風(fēng)格化的元素設(shè)計中,完成初稿之后,就可以將其“喂”給AI,使之“深度學(xué)習(xí)”。例如在某數(shù)字多媒體器樂劇中,第一幕的場景需要體現(xiàn)玫瑰和竹子的爭斗,要用到大量、風(fēng)格統(tǒng)一的素材。設(shè)計師畫出了一部分,而后又把設(shè)計師的初稿“喂”給了AI,并給出提示詞:“極簡主義,扁平化,線條繪畫風(fēng)格,復(fù)雜的墨水插圖,黑色背景,金色的線條勾勒出玫瑰,花朵朋克,超高清圖像,金色和黑色,迷人,精致的鉛筆素描,美學(xué)運動8k,超細(xì)節(jié)。”最后得出一組圖片:
重復(fù)以上步驟,就能得到無數(shù)張圖片素材,再從中挑選,用AI描摹技術(shù)轉(zhuǎn)換成矢量圖,就可以用到視頻之中。在此過程中,甚至可以只給出線稿,由AI來上色。這將為設(shè)計師節(jié)省大量時間,而后有更多的精力投入創(chuàng)作中去。
(三)分鏡設(shè)計。根據(jù)視頻的分鏡腳本、導(dǎo)演的舞臺腳本等,可以批量產(chǎn)出分鏡畫面。通過seed值(一種基于算法產(chǎn)生的隨機數(shù)字)固定主人公的形象,隨后用Midjourney生成人物的三視圖。描述出不同的場景的提示詞:場景、景別、相機類型、光線等,即可生成草圖,最后用stable diffusion(另一款A(yù)I繪圖軟件)的control net插件(一款人物骨骼固定插件,可以調(diào)整骨骼節(jié)點來模擬你想要的人物動作)固定好人物動作,再一次重繪,即可得出想要的分鏡畫面。在這些環(huán)節(jié),甚至可以讓AI根據(jù)劇本自動生成分鏡,利用Chatgpt等大語言模型,輸入提示詞即可生成專業(yè)的分鏡腳本。
(四)音頻設(shè)計。在數(shù)字舞美中,音頻是不可缺少的部分。現(xiàn)在,同樣可以讓AI制作音頻。以AI作曲軟件AIVA為例,如需制作一段古典主義風(fēng)格、具有神秘感的配樂,輸入關(guān)鍵詞,AIVA便會直接生成MIDI文件。對此文件可以實時修改,然后導(dǎo)入進音頻工作站重新配器,替換成更逼真的軟件音源,用專業(yè)的效果器混音。于是,一首商業(yè)級別的音樂就誕生了。
三、在數(shù)字舞美中熟練掌握人工智能
若要了解人工智能的工作原理、分類、應(yīng)用和發(fā)展趨勢,可以閱讀相關(guān)科普文章或觀看專業(yè)視頻來獲取知識,進而可篩選出關(guān)于藝術(shù)創(chuàng)作/效果制作的人工智能,涉及繪圖、腳本、故事創(chuàng)作、配樂,視頻制作等領(lǐng)域。與人工智能交流時,必然會運用到提示詞(prompt)。如果只是輸入一些簡單的短語,很多時候都無法得到滿意的結(jié)果。要怎么問、問什么,是一個需要深入研究的課題。例如在AI繪圖中,若想用Midjourney做一張端午節(jié)海報,提問Chatgpt:“請幫我想一個端午節(jié)海報的創(chuàng)意。”那么它會先對端午節(jié)進行背景介紹,然后提出過時的思路。如果把這種內(nèi)容輸入AI繪圖軟件,則將得到一些平平無奇的圖片。
因此需要轉(zhuǎn)變方法。首先可以提問Chatgpt:“插畫師和海報設(shè)計需要哪些專業(yè)素質(zhì)?”目的是使它深度學(xué)習(xí)插畫和海報設(shè)計方面的知識。隨后輸入Midjourney相關(guān)說明書,最后提問:“從現(xiàn)在開始你是一個專業(yè)的插畫師,如果做一張端午節(jié)主題的海報,你會怎么設(shè)計?請用適合輸入Midjourney的提示詞格式回答我。”片刻之后,AI會以極度專業(yè)的詞匯做出回答,包括構(gòu)圖、配色、光影、風(fēng)格等,而且是以提示詞的方式完成。再將這些提示詞復(fù)制進繪圖軟件中,就會得到一系列非常驚艷的圖片。用同樣的方法,AI也能完成專業(yè)攝影師、調(diào)色師、導(dǎo)演、音樂家等身份的工作,而不僅僅是一個簡單的聊天機器人。
目前很多企業(yè)都設(shè)置了“提示詞工程師”這一崗位,如何熟練地與AI對話是每一位AI使用者的必修課。掌握編程語言很有意義,Python是現(xiàn)在人工智能領(lǐng)域最流行和最實用的語言。如果條件不允許,也可以登錄Github、Civitai等網(wǎng)站,模仿、學(xué)習(xí)別人是怎么寫提示詞的。按照現(xiàn)在大語言模型的發(fā)展趨勢,AI對于自然語言的理解力只會越來越高。或許在不久的將來,用戶將不用去研究那些煩瑣的提示詞,只用自然的語言就能讓它很好地工作。
人工智能在數(shù)字舞美方面的應(yīng)用,給舞臺藝術(shù)帶來了許多創(chuàng)新和挑戰(zhàn)。一方面,人工智能可以為數(shù)字舞美提供更多的可能性和靈感,使其更加豐富和多樣化;另一方面,人工智能也給數(shù)字舞美提出了更高的要求和標(biāo)準(zhǔn),使其更加精細(xì)和專業(yè)。同時,人工智能也引發(fā)了一些關(guān)于藝術(shù)性、創(chuàng)造性、道德性等方面的問題和討論。例如,人工智能生成的數(shù)字舞美是否具有藝術(shù)價值?人工智能與演員或觀眾之間是否存在真正的互動?人工智能生成的作品版權(quán)怎樣歸屬?通過研究人工智能和深度學(xué)習(xí)在數(shù)字舞美藝術(shù)和創(chuàng)意領(lǐng)域的應(yīng)用和發(fā)展,展示了一些使用神經(jīng)網(wǎng)絡(luò)作為媒介的人工智能工具,以及人工智能在數(shù)字舞美中的實際應(yīng)用案例。希望能夠激發(fā)讀者,對AI的未來感到興奮,并且愿意接受它而不是拒絕它,把AI作為數(shù)字舞美藝術(shù)創(chuàng)作的有力工具。希望人工智能在數(shù)字舞美方面的應(yīng)用是一個新興而有前景的領(lǐng)域,它為舞臺藝術(shù)開辟了新的視野和空間,也提出了新的問題和挑戰(zhàn)。我們期待人工智能與數(shù)字舞美之間更多的合作與碰撞,以及更多的創(chuàng)新與突破。
(作者單位:江蘇省廣播電視集團有限公司創(chuàng)意視覺部)