計算機角色動畫制作中的可視媒體融合綜述

蘇玉慧

摘要：計算機角色動畫在計算機游戲、虛擬現(xiàn)實、運動仿真等多個領(lǐng)域有著深入的應(yīng)用，其主要包括可視媒體有圖像、視頻、三維模型等，傳統(tǒng)的單一可視媒體進(jìn)行計算機角色動畫制作正逐漸被多種可視媒體融合的制作方法取代。文章對計算機角色動畫制作中的可視媒體融合技術(shù)進(jìn)行了綜述。

關(guān)鍵詞：計算機角色動畫；可視媒體；融合技術(shù)

隨著計算機角色動畫制作的發(fā)展和應(yīng)用規(guī)模的逐漸擴大，計算機角色動畫制作還涉及計算機視覺、計算機圖形學(xué)及機器學(xué)習(xí)等技術(shù)范疇，因此，其發(fā)展過程成為多種可視媒體融合的研究領(lǐng)域。

1可視媒體融合技術(shù)概述

在計算機角色動畫制作中會涉及圖像、三維模型、視頻以及運動捕捉等多種數(shù)據(jù)的綜合處理，這些數(shù)據(jù)通過計算機的采集、編輯和壓縮的形式被制作成多媒體數(shù)據(jù)源的形式展現(xiàn)出來，并經(jīng)過相互之間的作用形成鮮明的動畫角色，這就是可視媒體融合技術(shù)。

多視點圖像中提取的角色通過對側(cè)影信息的變形來實現(xiàn)個性化角色的轉(zhuǎn)變，再通過對運動數(shù)據(jù)的捕捉來實現(xiàn)角色模型的驅(qū)動，以此建立具體的動畫角色。這個過程中主要運用了圖像、運動捕捉和三維模式。因此，不同的可視媒體所采用的融合技術(shù)是不相同的。

2可視媒體融合分類

計算機動畫角色在應(yīng)用過程中呈現(xiàn)出跨度大和設(shè)計范圍廣等特點，各種動畫角色的設(shè)置都需要建立在可視媒體的基礎(chǔ)上，下面對可視媒體的融合進(jìn)行分類研究。

2.1視頻融合

（1）多視點人體角色視頻合成三維角色動畫：對動畫角色進(jìn)行攝像機的同步，根據(jù)拍攝角色的輪廓、深度信息等對每一幀中的角色進(jìn)行重建，根據(jù)當(dāng)前視覺的多視點紋理來合成角色紋理，這樣就能夠得到三維角色動畫而不是靜態(tài)的三維模型了。（2）角色動畫片段生成：主要采用渲染的方式，實現(xiàn)了片段的編輯，生成角色所需要的動畫。（3）視頻重組：分解和提取現(xiàn)有視頻組合相似的視頻片段，使其成為一個新的視頻，實現(xiàn)了有限視頻資源的利用，視頻重組技術(shù)在一些特殊動畫角色上也有應(yīng)用，例如昆蟲等，通過對原有視頻的重新組合和制作進(jìn)而形成新的視頻，保證各種片段之間的連續(xù)性，用戶通過對代價函數(shù)的運用，實現(xiàn)了對角色運動軌跡的控制，進(jìn)而形成了嶄新的動畫角色。

2.2圖像融合

（1）IBM構(gòu)建角色模型：以IBM科學(xué)技術(shù)為基礎(chǔ)，以定標(biāo)的方式實現(xiàn)相機模型的產(chǎn)生，在多視點圖像中建立三維角色，并將事先做好的圖像貼到事先做好的模型當(dāng)中，以便實現(xiàn)真實角色的還原。但是還有一點需要注意，就是定標(biāo)的過程中可能產(chǎn)生一定的誤差，因此，角色模型與真實事物也會存在一定的差異。（2）卡通畫制作輔助系統(tǒng)：分層化處理輸入的關(guān)鍵幀，將其分解，對相鄰的2個關(guān)鍵幀筆畫可以建立對應(yīng)關(guān)系，利用插值技術(shù)形成渡幀，進(jìn)而促進(jìn)動畫的形成。（3）角色重用技術(shù)：采用背景分割的方式實現(xiàn)角色的提取，算出任意2幀之間的差異，最終得到距離矩陣，最后根據(jù)每一幀數(shù)據(jù)投影來形成連通圖，經(jīng)過畫師對連通圖起點終點計算最小路徑，從而構(gòu)成卡通角色動畫，為了使動畫更加平滑、完整，可以用插值的方式來生成過渡幀。

2.3三維模型融合

（1）實時插值技術(shù)：此技術(shù)以樣例為基礎(chǔ)，其插值方式有2種，一種是徑向基插值，一種是組合線性插值，這樣就實現(xiàn)了動畫人物角色及人臉上的平滑過渡，在一些動畫游戲的交互設(shè)計方面也有著重要的應(yīng)用。（2）人體模型變形技術(shù)：此技術(shù)也是以樣例為基礎(chǔ)，對人體表面的標(biāo)記點進(jìn)行掃面，能夠促進(jìn)動畫角色骨架的形成，進(jìn)而形成動畫樣本的參數(shù)，在參數(shù)空間內(nèi)進(jìn)插值就能夠得到動畫角色模型，人體樣本子空間的建立的主要方法是PCA法，能夠?qū)崿F(xiàn)個性化人體角色的生成，樣本數(shù)據(jù)由多個人體模型來組成，這種模型的合成和變形技術(shù)主要生成的都是動畫角色人物的靜態(tài)模型。（3）關(guān)節(jié)運動生成：當(dāng)前有許多研究指出可以利用逆向運動來生成關(guān)節(jié)運動，首先建立世界坐標(biāo)系，得出角色角的具體位置，通過偽逆矩陣來實現(xiàn)動畫角色全身各項關(guān)節(jié)處的旋轉(zhuǎn)角度，進(jìn)而促進(jìn)關(guān)節(jié)運動的實現(xiàn)。

2.4運動捕獲數(shù)據(jù)融合

將已經(jīng)存在的運動數(shù)據(jù)作為輸入，對這些已經(jīng)存在的數(shù)據(jù)進(jìn)行處理，形成新的數(shù)據(jù)，這個過程就是運動捕獲數(shù)據(jù)融合的過程：（1）設(shè)定副詞空間：在此空間的多條坐標(biāo)軸都代表了不同的運動數(shù)據(jù)，可能是不同說話風(fēng)格的數(shù)據(jù)，也可能是不同角色類型的數(shù)據(jù)。之后在每條坐標(biāo)中用手工標(biāo)注出預(yù)期相對應(yīng)的運動數(shù)據(jù)樣本，最后對這些數(shù)據(jù)進(jìn)行插值處理，就能夠得到新的運動數(shù)據(jù)。（2）將原始數(shù)據(jù)投影到低維空間中：對其進(jìn)行參數(shù)化設(shè)置，這樣就可以在其中進(jìn)行草圖的勾畫，或?qū)θS人體姿態(tài)進(jìn)行操作，最后對這些原始運動數(shù)據(jù)進(jìn)行插值處理。（3）運動檢索：從運動數(shù)據(jù)庫中實現(xiàn)對數(shù)據(jù)的捕捉，對捕捉到的數(shù)據(jù)進(jìn)行檢索，得到數(shù)據(jù)存在的邏輯關(guān)系，實現(xiàn)參數(shù)化的空間設(shè)置，之后進(jìn)行差值處理，得到新的捕獲數(shù)據(jù)；（4）運動紋理：運動紋理有2層結(jié)構(gòu)，其是一種統(tǒng)計的模型，運動元素在底層結(jié)構(gòu)中設(shè)置，能夠表示出運動數(shù)據(jù)的相關(guān)片段，最后生成運動紋理的模型，從而實現(xiàn)具有真實感的人體三維數(shù)據(jù)。（5）多分辨率過濾：不同風(fēng)格的運動有著不同的頻率信號，多分辨率過濾法能夠?qū)⒏哳l信號和中低頻信號分開。（6）獨立成分分析：通過此方法能夠生成真實感人體的運動數(shù)據(jù)，在原始高維人體運動數(shù)據(jù)中，對人體行為特點進(jìn)行抽取，建立ICA子空間，并根據(jù)插值操作，形成人體運動新數(shù)據(jù)的產(chǎn)生。

2.5視頻與三位模型融合

對動畫角色和輸入的視頻動畫進(jìn)行動畫角色的融合，這個過程就稱為視頻與三維模型的融合。上文中提到以多視點視頻變形中性模型得到動畫角色的方法，以此方法為基礎(chǔ)，對一段角色的運動進(jìn)行多視點拍攝，以其中的不同角度的角色側(cè)影為約束條件，將角色模型進(jìn)行投影，在各個視角顯示，利用能量函數(shù)對中性模型進(jìn)行變形，這樣就能夠使側(cè)影和投影的重疊最大，最后運用時空的紋理技術(shù)進(jìn)行紋理信息的提取工作，制定動畫角色。視頻的提取能夠?qū)崿F(xiàn)角色側(cè)影的提取，對中性的模型實現(xiàn)變形的特征。還能夠通過重建角色人臉的三維結(jié)構(gòu)從而得到個性化的人臉，重建的過程中主要重建的是人臉之間的距離。

通過濾波器預(yù)測將要跟蹤的特征的具體位置，之后完成特征的匹配，整個特征跟蹤的流程為：預(yù)測——修正——預(yù)測，人體模型中有多個部位，且每一個部位之間都存在一定的比例關(guān)系，以這些經(jīng)驗知識為基礎(chǔ)就能夠恢復(fù)人體的三維運動。

通過對側(cè)影的方法的實施來計算人體運動情況，進(jìn)而得出一定的數(shù)據(jù)。首先需要進(jìn)行側(cè)影工作的提取，通過了解人體骨架結(jié)構(gòu)，在人體內(nèi)部做姿態(tài)搜索工作，得出最佳的姿態(tài)數(shù)據(jù)，用作恢復(fù)的結(jié)果，之后對角色進(jìn)行驅(qū)動，從而獲得角色動畫。

此外，還可以通過對人臉特征的運動方式的追蹤，進(jìn)而實現(xiàn)對人臉目標(biāo)的驅(qū)動，得到動畫角色的人臉動畫。

在上述分析的可視媒體融合中，都是通過側(cè)影及運動的約束和對三維模型角色的驅(qū)動來完成的，因此成為視頻與三維模型的融合。

2.6運動捕獲與三維模型融合

首先介紹一種運動重定向技術(shù)，將一個角色產(chǎn)生的所有數(shù)據(jù)在相同的結(jié)構(gòu)上重啟，保存運動動作，保存原有運動角色的在時空條件上的約束，在重定的過程中要以此時空約束條件為基礎(chǔ)。

分析一種異構(gòu)角色之間的重定向技術(shù)，以運動樣例為基礎(chǔ)，提取關(guān)鍵字時，根據(jù)這個關(guān)鍵姿勢構(gòu)建動畫角色的姿勢，最后對關(guān)鍵幀進(jìn)行相應(yīng)的插值就能夠得到所需要的目標(biāo)角色動畫。

當(dāng)前還有比較流行的一種通過規(guī)定時空約束條件實現(xiàn)運動重用的過程，其主要以相應(yīng)的目標(biāo)函數(shù)為基礎(chǔ)，對相對應(yīng)的角色進(jìn)行求解，建立目標(biāo)角色動畫。三維網(wǎng)絡(luò)模型與骨架架構(gòu)相互對應(yīng)，利用一種自動識別技術(shù)對關(guān)節(jié)點位置、數(shù)量、結(jié)構(gòu)等進(jìn)行識別，實現(xiàn)對應(yīng)，最后通過對運動數(shù)據(jù)的捕捉，實現(xiàn)目標(biāo)動畫角色的有機形成。

2.7圖像、三維模型以及運動捕獲數(shù)據(jù)三者的融合

先前所提到的都是2種可視媒體的融合，而圖像、三維模型以及運動捕獲三者可以進(jìn)行融合，最終生成目標(biāo)角色動畫。首先，對人體角色進(jìn)行拍攝，拍攝時需要注意，要從4個正交方向分別拍攝，之后要提取側(cè)影，奠定角色側(cè)影模型側(cè)影與模型側(cè)影之間的緊密聯(lián)系，對兩者之間的聯(lián)系進(jìn)行深入的了解，實現(xiàn)對中性模型的約束。當(dāng)進(jìn)行文理映射時，會通過對運動中捕捉到的數(shù)據(jù)建立驅(qū)動模型，形成動畫角色。其中可以對變形中性模型進(jìn)行細(xì)致劃分，這樣得到的角色模型會更加精確，也就能夠驅(qū)動模型來獲得效果更好的角色動畫。以上分析的角色動畫生成方法就融合了圖像、三維模型以及運動捕獲等3種可視媒體。

3結(jié)語

本文對可視媒體融合技術(shù)進(jìn)行了簡單的闡述，具體對不同的融合類型進(jìn)行了綜述，首先分析了4種最基本的可視媒體生成角色動畫的技術(shù)，之后介紹了視頻與三維模型融合技術(shù)、運動捕獲與三維模型和運動捕獲與三維模型融合技術(shù)的融合技術(shù)。