一部車,兩對(duì)情侶,一段闊別二十多年重返故鄉(xiāng)的旅途……由柏林電影節(jié)金熊獎(jiǎng)導(dǎo)演刁亦男監(jiān)制,青年導(dǎo)演任永強(qiáng)導(dǎo)演的電影《巴丹吉林》是一部與眾不同的電影。它的特殊之處在于整部影片完全由華為Mate30系列手機(jī)拍攝而成,沒(méi)有運(yùn)用任何的外接鏡頭。它和另外兩部同樣由華為Mate30系列手機(jī)拍攝而成的影片《你的樣子》和《泳往春天》一起登上大銀幕,成為金雞獎(jiǎng)全新競(jìng)賽單元的作品。

在剛剛過(guò)去的第28屆中國(guó)金雞百花電影節(jié)上,華為與官方達(dá)成了合作,設(shè)立了新影像 · 手機(jī)影片競(jìng)賽單元。將手機(jī)攝影帶入電影行業(yè),讓每一個(gè)人都成為電影導(dǎo)演…….是“華為影業(yè)”想要借此傳達(dá)的理念。而在可以預(yù)見的未來(lái),經(jīng)過(guò)創(chuàng)新升級(jí)以及5G賦能后的手機(jī)影像技術(shù)帶給我們的想象卻遠(yuǎn)不止于此。
嚴(yán)格意義上講,手機(jī)電影并不是什么新的概念。
早在2011年,第一部由智能手機(jī)拍攝的長(zhǎng)篇電影《Olive》就在美國(guó)圣塔莫妮卡的Nuart影院正式上映,這部電影由諾基亞 N8外加一個(gè)35mm鏡頭拍攝;而手機(jī)電影“登堂入室”進(jìn)入專業(yè)電影節(jié)的典型代表則是2018年美國(guó)知名導(dǎo)演 Steven Soderbergh 拍攝的恐怖片《Unsane》,劇組當(dāng)時(shí)是利用 iPhone 7 Plus 完成這部影片的拍攝的,這部影片最終入圍了柏林電影節(jié)的主競(jìng)賽單元。
真正意義上的手機(jī)電影出現(xiàn)和智能手機(jī)逐漸成為市場(chǎng)主流的時(shí)間大致相當(dāng)。這是因?yàn)楣δ軝C(jī)時(shí)代的主流手機(jī)影像水平,并不能滿足電影創(chuàng)作的畫質(zhì)需求。智能手機(jī)出現(xiàn)之后,相機(jī)從一個(gè)點(diǎn)綴性質(zhì)的邊緣功能,逐漸成為智能手機(jī)的核心體驗(yàn),其經(jīng)歷了由單純的“影像記錄”走向“影像創(chuàng)作”的過(guò)程。
這個(gè)演變過(guò)程的背后,反映出來(lái)的是整個(gè)手機(jī)影像技術(shù)變革。誕生于2000年的夏普J(rèn)-SH04是世界上第一款配備攝像頭的手機(jī)。當(dāng)時(shí)它的攝像頭像素僅有區(qū)區(qū)11W像素,連打印一寸照片的精度都不夠。隨后的幾年時(shí)間內(nèi),主流手機(jī)在影像方面的發(fā)展是以像素提升為主的,大致跨越了30W、130W、200W、320W幾個(gè)重要的節(jié)點(diǎn)。雖然絕對(duì)像素?cái)?shù)提升了數(shù)十倍,但手機(jī)的畫質(zhì)水平并沒(méi)有獲得革命性的提升。雖然在此期間也有部分機(jī)型加入了自動(dòng)對(duì)焦、氙氣閃光燈甚至是光學(xué)變焦這樣的功能,但這些機(jī)型都只是相對(duì)小眾的試水產(chǎn)品,沒(méi)能最終成為市場(chǎng)主流。
真正讓手機(jī)進(jìn)入到足以創(chuàng)作主流視頻影像的階段,還是要?dú)w功于智能手機(jī)的到來(lái)。智能手機(jī)成為市場(chǎng)主流之后,手機(jī)影像層面的體驗(yàn)逐漸被用戶和廠商所重視。幾年時(shí)間下來(lái),手機(jī)影像技術(shù)發(fā)展已經(jīng)完全脫離了“移植相機(jī)功能到手機(jī)”的做法,而是自成一派,形成了獨(dú)有的迭代和發(fā)展體系。
在這個(gè)過(guò)程中,手機(jī)影像經(jīng)歷了一系列的技術(shù)變革:比如完成向更高像素邁進(jìn)之后,暗光拍攝更有優(yōu)勢(shì)的“大像素”逐漸被看重,更適合智能手機(jī)的CMOS傳感器取代CCD傳感器成為主流,OIS光學(xué)防抖、激光/相位對(duì)焦技術(shù)、LED閃光燈等輔助功能的應(yīng)用等等。究其本質(zhì),這些技術(shù)創(chuàng)新都是在畫質(zhì)技術(shù)提升的基礎(chǔ)上,針對(duì)智能手機(jī)需要兼顧功耗、成本、體積等特點(diǎn)作出的優(yōu)化和改進(jìn)。
與此同時(shí),手機(jī)影像技術(shù)的發(fā)展也在很大程度上改變了智能手機(jī)的形態(tài)。人們對(duì)于手機(jī)影像的更高畫質(zhì)和更多功能需求,讓手機(jī)鏡頭開始由單攝向多攝演進(jìn)。榮耀6 Plus是整個(gè)華為、榮耀體系下第一款采用了后置雙攝方案的機(jī)型,也是業(yè)內(nèi)第一批嘗試“主攝+副攝”鏡頭配置廠商之一。其后置雙800萬(wàn)像素?cái)z像頭的協(xié)同不僅能夠合成更高像素的照片,還能完成景深信息的獲取。在雙攝被業(yè)界跟進(jìn)之后,華為、榮耀隨后推出了諸如P20/Mate 20系列、P30/Mate30系列、V20/20系列等一眾旗艦機(jī)型,這些機(jī)型開始率先搭載多攝乃至陣列式的后置方案。除了傳統(tǒng)的主攝之外,手機(jī)出現(xiàn)了超廣角、微距、變焦、TOF等功能特性更加明顯的多攝鏡頭。

不可忽略的是,以蘋果、華為、三星為代表的廠商為了在手機(jī)影像上拉開和友商之間的差距,在關(guān)鍵的CMOS上開始奉行“私人訂制”的策略。華為P9發(fā)布會(huì)上,伴隨這款年度旗艦一起現(xiàn)身的還有索尼IMX286這款定制CMOS。其有效像素為1200萬(wàn),單位像素尺寸1.25μm,CMOS面積1/2.9英寸并支持RGB/Monochrome(彩色+黑白)架構(gòu)。彩色攝像頭采用傳統(tǒng)的RGBG拜耳陣列,用以記錄畫面中的彩色信息;而另一枚Monochrome攝像頭取消了CMOS上面的分色濾鏡,進(jìn)光量是普通拜耳陣列CMOS進(jìn)光量的數(shù)倍。隨后,IMX286也被應(yīng)用在榮耀V8上面。
獨(dú)家定制的旗艦CMOS逐漸成為了華為手機(jī)的標(biāo)簽。之后的P10\P20\P30以及對(duì)應(yīng)的Mate系列機(jī)型都無(wú)一例外地采用了定制化的圖像傳感器。事實(shí)上,與其說(shuō)是單獨(dú)定制,還不如說(shuō)是華為同上游產(chǎn)業(yè)鏈之間的聯(lián)合開發(fā)。拿華為Mate 30系列來(lái)說(shuō),其4000萬(wàn)像素電影攝像頭擁有華為手機(jī)迄今最大的1/1.54英寸感光元件;4000萬(wàn)像素超感光攝像頭采用RYYB濾色陣列,可實(shí)現(xiàn)ISO 409600的照相感光值。CMOS層面的獨(dú)到優(yōu)勢(shì),是華為Mate 30系列在手機(jī)成像領(lǐng)域獨(dú)步天下的基礎(chǔ)。
發(fā)展到這個(gè)階段的智能手機(jī),不僅能夠拍出2K甚至4K級(jí)別的超高清畫質(zhì)視頻,而且還能夠滿足環(huán)境更加復(fù)雜、需求更加多元的用戶需求。比如前面我們提到的使用華為手機(jī)拍攝的電影《巴丹吉林》,全程就只使用了Mate30系列進(jìn)行拍攝。電影中展示的許多超廣角、微距、人物特寫畫面都是由手機(jī)完成,沒(méi)有借助任何額外的輔助鏡頭。一部手機(jī)也能拍攝出鏡頭語(yǔ)言更加豐富、更具藝術(shù)張力的畫面,真正讓手機(jī)電影創(chuàng)作成為了可能。
相較于傳統(tǒng)意義上依靠光學(xué)、傳感器等傳統(tǒng)影像技術(shù)的迭代和升級(jí),AI在手機(jī)影像層面的廣泛應(yīng)用對(duì)于智能手機(jī)乃至整個(gè)影像行進(jìn)有著更加深遠(yuǎn)的意義。
目前AI在智能手機(jī)成像方面的應(yīng)用可謂無(wú)處不在,最常見的諸如場(chǎng)景識(shí)別、智慧防抖、超級(jí)夜景、人像光效、3D美顏等等,幾乎貫穿從拍攝到成像的始終。拿視頻拍攝來(lái)說(shuō),通過(guò)內(nèi)置的AI場(chǎng)景識(shí)別功能手機(jī)能夠?qū)ε臄z的環(huán)境進(jìn)行精準(zhǔn)判定,自動(dòng)調(diào)整諸如快門、光圈、ISO等參數(shù),讓用戶能夠以傻瓜式的方式獲得清晰的畫面。
這些AI技術(shù)的廣泛應(yīng)用,是以智能手機(jī)AI性能的整體提升為基礎(chǔ)的,具體來(lái)說(shuō)就是相關(guān)的圖形識(shí)別、理解、處理算法以及機(jī)器深度學(xué)習(xí)能力的提升。這其中的典型代表就是華為麒麟系列芯片近些年在NPU方面做出的嘗試。

早在2017年10月,華為就推出首款A(yù)I芯片麒麟970,其最大的特點(diǎn)就是首次在處理器上集成了專用于AI學(xué)習(xí)的硬件模塊NPU(神經(jīng)網(wǎng)絡(luò)處理器,Neural-network Processing Unit)。其對(duì)圖像識(shí)別處理、自然語(yǔ)言理解處理速度比CPU快了25倍,能耗降低50倍。基于麒麟970所帶來(lái)的強(qiáng)大AI性能,當(dāng)年搭載了這款芯片的華為P20系列、榮耀10系列等旗艦在成像方面擁有強(qiáng)大的實(shí)力。拿場(chǎng)景識(shí)別來(lái)說(shuō),當(dāng)年榮耀10系列就支持多達(dá)22類標(biāo)簽,500+種場(chǎng)景的AI場(chǎng)景識(shí)別能力。


作為麒麟970的繼任者,麒麟980將NPU的性能提升到了雙核,圖像識(shí)別速度比970提升120%。應(yīng)用層面,搭載了麒麟980的機(jī)型從識(shí)別輪廓升級(jí)為可以識(shí)別細(xì)節(jié),拍攝視頻時(shí)同時(shí)實(shí)時(shí)“跟蹤”多個(gè)對(duì)象,甚至可以給視頻“換背景”。同年推出的中端處理器麒麟810,搭載了華為自研達(dá)芬奇架構(gòu)NPU。按照AI-Benchmark提供的數(shù)據(jù),麒麟810的AI性能甚至比自家的旗艦麒麟980還要強(qiáng),更是秒殺了驍龍855等一眾競(jìng)品。
今年的麒麟990上,手機(jī)的AI能力再次實(shí)現(xiàn)了飛躍,它采用了基于華為自研達(dá)芬奇架構(gòu)的全新大核+微核架構(gòu)的NPU。麒麟990 5G擁有業(yè)界最強(qiáng)AI算力,與業(yè)界其他旗艦AI芯片相比,性能優(yōu)勢(shì)高達(dá)6倍,能效優(yōu)勢(shì)高達(dá)8倍。其在AIBenchMark上的跑分達(dá)到了麒麟980的476%。
強(qiáng)大的AI性能,是整個(gè)AI智慧影像的基礎(chǔ)。借助麒麟990 5G的AI性能能夠?qū)崿F(xiàn)視頻的多實(shí)例分割,簡(jiǎn)單說(shuō)就是能夠?qū)⒁曨l畫面中的每一個(gè)人物主體單獨(dú)識(shí)別出來(lái),實(shí)現(xiàn)多人物視頻拍攝替換背景,甚至可以選擇畫面中需要保留的人物。
其實(shí)可以看出,AI在手機(jī)影像層面的廣泛和深度應(yīng)用背后的意義主要有三點(diǎn):增強(qiáng)畫質(zhì)、豐富玩法以及功能輔助。AI影像技術(shù)有效彌補(bǔ)了手機(jī)在硬件層面的天然劣勢(shì),比如傳統(tǒng)意義上成像,要獲得畫質(zhì)提升就需要從傳感器以及光學(xué)層面入手,但諸如夜景模式這類的AI軟件算法卻能夠通過(guò)技術(shù)手段來(lái)解決暗光環(huán)境下成像的痛點(diǎn),實(shí)現(xiàn)手機(jī)畫質(zhì)的全面提升。
其次就是豐富玩法,AI技術(shù)的引入讓整個(gè)手機(jī)影像的玩法變得有趣和多元。拿視頻來(lái)說(shuō),借助內(nèi)置的AI算法實(shí)現(xiàn)實(shí)時(shí)美顏、人像光效甚至是超高速攝影這類之前只有專業(yè)級(jí)別的設(shè)備才能實(shí)現(xiàn)的趣味功能。這些功能不僅僅能夠成為智能手機(jī)的獨(dú)到賣點(diǎn),而且也是拉開用戶體驗(yàn)差異的核心功能點(diǎn)。而這些功能點(diǎn)的引入,離不開一顆擁有強(qiáng)大AI運(yùn)算和圖像處理能力的芯片。
功能輔助的意義同樣重要,并且還更關(guān)鍵。AI的應(yīng)用讓影像創(chuàng)作變得簡(jiǎn)單和直觀,用戶無(wú)需經(jīng)過(guò)專業(yè)的學(xué)習(xí)和培訓(xùn)就能夠利用自己的手機(jī)獲得傳統(tǒng)意義上只有專業(yè)攝影師才能拍攝出來(lái)的畫面。用戶門檻的降低,讓手機(jī)的影像創(chuàng)作在日常生活中得到普及。也正是因?yàn)檫@樣的轉(zhuǎn)變,我們每一個(gè)普通人都能成為影像創(chuàng)作者。
從傳統(tǒng)的機(jī)器影像到AI智慧影像的轉(zhuǎn)變,是未來(lái)智能手機(jī)行業(yè)的趨勢(shì)。這種依靠AI技術(shù)帶來(lái)的影像能力的提升,在未來(lái)?yè)碛蟹浅V闊的應(yīng)用前景。同時(shí)AI智慧影像對(duì)于傳統(tǒng)影像領(lǐng)域能夠起到一定的啟示作用,我們可以看到,借助AI技術(shù)不僅能夠彌補(bǔ)硬件層面的短板,而且還能解決那些很難通過(guò)硬件升級(jí)解決的痛點(diǎn)。AI技術(shù)的演化與傳統(tǒng)影像技術(shù)的變革,二者相互作用下,可能會(huì)改變整個(gè)影像行業(yè)的未來(lái)。
4G時(shí)代,以短視頻為代表的新形式獲得了飛速發(fā)展,而5G網(wǎng)絡(luò)的高速率、大帶寬優(yōu)勢(shì),讓未來(lái)視頻應(yīng)用的前景變得更加廣闊。借助5G網(wǎng)絡(luò)的優(yōu)勢(shì),視頻應(yīng)用將成為接下來(lái)獲得爆發(fā)式增長(zhǎng)的行業(yè)風(fēng)口,這已經(jīng)是被業(yè)內(nèi)普遍認(rèn)可的趨勢(shì)。
視頻應(yīng)用的廣泛興起,將促使更多的普通用戶參與到視頻的創(chuàng)作中來(lái)。即拍即傳,即時(shí)觀看,全民分享的新形式,讓每一個(gè)普通用戶都有機(jī)會(huì)成為視頻內(nèi)容創(chuàng)作者。而結(jié)合5G網(wǎng)絡(luò)帶來(lái)的高速率新特性,超高清視頻也將會(huì)是未來(lái)視頻應(yīng)用新的發(fā)展方向。用戶對(duì)于視頻應(yīng)用以及視頻創(chuàng)作的需求激增,反過(guò)來(lái)也會(huì)促進(jìn)整個(gè)智能手機(jī)影像行業(yè)的創(chuàng)新和升級(jí)。智能手機(jī)作為未來(lái)一段時(shí)間之內(nèi)用戶最核心的設(shè)備,其視頻拍攝性能以及圍繞視頻應(yīng)用所帶來(lái)的應(yīng)用場(chǎng)景的變革,將會(huì)是整個(gè)用戶關(guān)心和在意的核心體驗(yàn)。
有了5G加持,AI技術(shù)也能更加廣泛便捷地應(yīng)用到視頻創(chuàng)作中去。傳統(tǒng)意義上的視頻創(chuàng)作中繁瑣的圖像剪輯和后期制作將越發(fā)便捷和智能,比如更加精準(zhǔn)的自動(dòng)摳圖,更加復(fù)雜多元的場(chǎng)景識(shí)別等,這些都能讓普通用戶釋放其創(chuàng)意和才華。甚至在不遠(yuǎn)的未來(lái),借助5G帶來(lái)的無(wú)縫式云端服務(wù)的體驗(yàn),未來(lái)的視頻創(chuàng)作、分享、保存都將會(huì)在云端完成。事實(shí)上,目前很多智能手機(jī)就能夠借助自身的AI功能,自動(dòng)將相冊(cè)中的素材生成視頻。未來(lái),這種體驗(yàn)將會(huì)更加無(wú)縫和及時(shí)。僅僅使用一臺(tái)智能手機(jī),就能夠完成視頻的“一站式”創(chuàng)作體驗(yàn)。
另一方面,未來(lái)5G更加成熟,尤其是基于SA組網(wǎng)的5G核心網(wǎng)成熟之后,5G網(wǎng)絡(luò)相比之前的4G最大的優(yōu)勢(shì):低延遲、泛在網(wǎng),將會(huì)發(fā)揮更大的作用。這也將給未來(lái)的視頻創(chuàng)作和表現(xiàn)形式帶來(lái)更多的可能性。以AR\VR技術(shù)為基礎(chǔ)的沉浸式視頻,“萬(wàn)物互聯(lián)”讓每一個(gè)設(shè)備都有可能成為視頻的創(chuàng)作設(shè)備。我們的手機(jī)、智能眼鏡、大屏終端等等,都將參與到影像創(chuàng)作之中,成為5G影像創(chuàng)作生態(tài)中的一環(huán)。這些新的技術(shù)創(chuàng)新形式,對(duì)于未來(lái)整個(gè)視頻行業(yè)產(chǎn)生的變革作用將是無(wú)法想象的。
很早開始,影像就逐漸演變成為智能手機(jī)最核心的賣點(diǎn)之一。在整個(gè)行業(yè)進(jìn)步和成熟之后,智能手機(jī)在其他方面的體驗(yàn)難以拉開絕對(duì)體驗(yàn)差距的情況下,最能夠創(chuàng)造差異化體驗(yàn)的相機(jī)就成為了智能手機(jī)的核心升級(jí)點(diǎn)之一。華為和榮耀很早就預(yù)見到了這種趨勢(shì)。從超級(jí)夜景這類創(chuàng)新型影像黑科技的加入,到配備獨(dú)立NPU的麒麟處理器問(wèn)世,乃至最后出色的影像體驗(yàn)成為整個(gè)華為、榮耀手機(jī)的標(biāo)簽。這其中的每一步,華為和榮耀都走得很堅(jiān)實(shí)。
在未來(lái)相當(dāng)長(zhǎng)的一段時(shí)間內(nèi),5G和影像將會(huì)是智能手機(jī)的核心升級(jí)點(diǎn)。而正如前面所言,這兩者之間又是相互促進(jìn)、相互依托的關(guān)系。二者在技術(shù)和功能層面的有機(jī)結(jié)合,才是接下來(lái)智能手機(jī)需要重點(diǎn)攻克的新高地。借助即將迎來(lái)爆發(fā)式增長(zhǎng)的視頻應(yīng)用,智能手機(jī)影像將全面進(jìn)入“5G電影時(shí)代”。
按照這樣的標(biāo)準(zhǔn)來(lái)看,華為Mate30系列算是給接下來(lái)5G時(shí)代的旗艦手機(jī)樹立了一個(gè)標(biāo)桿。而“不止于快”的榮耀V30將有望引領(lǐng)接下來(lái)的“5G電影時(shí)代”。這款旗艦和華為Mate30系列一起是目前市面上雙模5G全國(guó)通的唯二選擇。而在影像領(lǐng)域,華為Mate30系列cine-lens電影鏡頭將手機(jī)攝影帶到了一個(gè)全新的高度,榮耀V30系列這次搭載的Matrix Camera多維相機(jī)矩陣也將會(huì)給手機(jī)影像帶來(lái)更多的探索和思考。
即將到來(lái)的“5G電影時(shí)代”,利用手機(jī)創(chuàng)作影像將會(huì)是我們每天的常態(tài),每一個(gè)平凡的普通人,都將成為自己生活的導(dǎo)演。