包永剛
最近有一位叫作“喬碧蘿殿下”的神秘女子入侵了多個平臺的熱搜榜,只因為這位粉絲心目中聲音甜美的顏值主播在一次連麥PK大賽中,平時用于遮擋臉的GIF圖戲劇性地沒了,這一事件迅速成了關注的焦點。你是否想過,如果喬碧蘿殿下用的是當下熱門的變臉軟件,結果會如何?如今,基于AI技術,具備一鍵變明星、一鍵男變女、一鍵步入老年功能的變臉APP非常火爆。比如Snapchat的性別交換濾鏡,不僅能在濾鏡開啟后變換性別,而且濾鏡在不同角度以及各種光線下的表現都十分不錯。不過,Snapchat的實時視頻變臉并非所有手機都支持,因為這一功能的實現一方面需要手機有較強的硬件性能;另一方面,對于網絡的要求也很高,要依靠云端訓練和效果實施。這不僅帶來了隱私問題,還限制了有趣AI應用的普及。但情況正在改變,隨著手機處理器性能的提高,特別是AI性能的增強,手機AI不僅能拯救拍照手殘黨,改變購物方式,還會改變你的生活方式。
AI通話降噪及超級夜景功能
手機最重要也是最基礎的功能無疑是通信,隨著通信技術的發展,手機通話質量越來越高,但嘈雜環境下打電話聽不清楚的問題一直沒有被解決。目前,部分手機增加了通話降噪功能,比如中興、努比亞等。據了解,這些手機中的通話降噪的算法來自大象聲科(ELEVOC),算法基于計算聽覺場景分析理論,應用深度學習技術。而其中很重要的一點是,通話降噪的算法有了高通人工智能引擎AI Engine的支持,能夠實時分離手機通話中的人聲和背景噪聲,使用者不論身處多么嘈雜的環境打電話,對方聽到的始終是你清晰自然的聲音。通話降噪的應用當然不局限于語音通話,高通與大象聲科合作,在Skype視頻和語音通話中可以從呼叫方噪聲的背景中精確地提取使用者的聲音,并且這個功能只用一個麥克風就能實現比多個麥克風更加精確地噪聲抑制。有了AI通話降噪功能,以后無論是在體育賽事現場、音樂節還是家庭聚會,都可以獲得高質量的通話,再也無懼嘈雜的環境。
對于部分人而言,語音和視頻通話是低頻使用功能,手機的拍照卻極為重要。但是,不少人因為手機硬件本身或拍照技術等問題,總會拍出一些模糊甚至扭曲的照片。比如拍食物的時候,很多人都遇到過把壽司拍模糊的情況,想拍一張滿意的照片需要耗費不少時間。現在,AI可以拯救拍照手殘黨。SensePhoto超分辨率功能可以對標光學(物理)變焦鏡頭,用AI算法實現比肩光學變焦鏡頭的畫質清晰度,這個功能來自高通的合作伙伴商湯科技。要拍出高清晰度的照片,夜晚的難度顯然更大,AI也可以讓夜間拍出好照片更加容易。AI超級夜景功能能夠進行智能降噪以及防抖,結合傳統的計算機視覺和深度神經網絡算法,可以讓用戶通過手持手機的方式或腳架模式(腳架效果更佳)以較長的曝光模式拍攝出細節更多、更極致的超級夜景影像,這個技術來自高通的AI合作伙伴虹軟。高通的另一個AI合作伙伴曠視也有超畫質功能,通過對原始圖像進行處理,全新的超畫質(Super IQ)技術能夠更好地降低圖片噪聲、保留畫面細節,優化拍攝和影像處理的時間。手機拍照不僅追求更高畫質,還在追求接近單反相機的效果。因此,如今手機攝像頭都是2個甚至5個,再匹配強勁的AI處理器能力和不錯的AI算法,能夠實現接近單反的效果。比如NALBI的圖像AI深度技術,能將數碼單反相機的虛化效果應用于任何圖片,即使是來源于網絡甚至其他設備的照片。需要明白,以上這些功能的實現都是AI算法與AI硬件深度融合的結果。不同公司的AI算法各有特色,但它們都能在靈活且高性能的高通AI Engine的支持下,實現令人滿意的效果,特別是針對AI Engine優化的算法。AI算法和AI Engine的深度融合不僅能拯救拍照手殘黨,讓手機拍照的質量更好,還能讓拍照變得更加有趣。虹軟也推出了AI 智能雙攝視頻虛化功能,針對多攝像頭手機,可以在拍攝視頻時即時更改焦點區域,產生出色的景深效果與前后景虛化體驗。
AI軟硬實力的展現
除此之外AI手游也廣受歡迎。報告顯示,2018年中國移動游戲用戶規模為6.05億人,同比增長9.2%。2018年中國移動游戲市場實際銷售收入占全球移動游戲市場比例約為30.8%。那AI和手機游戲能碰撞出什么火花?8月初,在2019 ChinaJoy的高通驍龍主題館開館儀式上,《王者榮耀》的頂尖選手與AI 電競戰隊——“SUPEX”進行了一場1v1對戰,最終,AI 電競戰隊一舉贏得比賽。這是SUPEX的移動AI電競首秀,也是iQOO聯合王者榮耀、騰訊 AI Lab 、高通驍龍為探索終端側AI性能而創建的“想象力工程”項目首次嘗試將移動游戲的AI推理能力首次大規模從云端遷移至終端iQOO 產品上。四方的合作充分利用了第四代高通人工智能引擎AI Engine的強大異構計算能力,為手機端帶來了不一樣的游戲體驗。AI不僅能與玩家進行游戲對戰,還帶來了新游戲。比如SensePosture的人體骨架檢測(3D)技術,通過RGB和深度數據的輸入,可以檢測到3D的人體骨骼關鍵點和人體輪廓深度圖,并支持實時跟蹤,可以進行體感游戲、體感交互等。同樣是高通AI合作伙伴的華捷艾米推出3D玩偶功能,在高通人工智能引擎AI Engine的支持下,用戶可以操控虛擬人偶、明星模型或卡通玩偶和被拍攝者做同樣的動作,并錄制短視頻或者拍照。
無論是拍照、游戲、購物在AI時代的新玩法,還是因為終端AI性能的提升帶來的新奇應用,最為重要的還是軟件和硬件的結合。AI算法多樣,并且在不斷迭代,只有算力強、且兼具靈活性和功耗優勢的手機SoC才能支撐AI應用的普及和創新。AI近幾年備受關注,但高通在AI的基礎科技研發早在十多年前就已經開始,特別是在深度學習、神經計算和豐富的AI算法等領域。從4年前的驍龍820開始,高通就已經在驍龍移動平臺上實現了第一代人工智能引擎AI Engine的商用。最新的旗艦移動平臺驍龍855集成了高通第四代多核人工智能引擎AI Engine。與前幾代AI Engine的理念相同,第四代AI Engine充分利用驍龍的異構多核可編程架構,對每個內核進行大幅優化和提升,強調整體芯片面向AI計算的高效率和靈活性。值得注意的是,在驍龍855上,Hexagon進化為更通用、更加強大的系統。不僅 DSP的功能得到了擴展,更是新增了獨立的AI硬件核心HTA (Hexagon張量加速器),以綜合實現可編程的AI加速。此外,第四代高通人工智能引擎AI Engine軟件套件可以為高通神經處理SDK、Google Android NN-API以及Hexagon NN和Qualcomm Math Library帶來一系列的提升。如今,利用第四代高通人工智能引擎AI Engine的AI軟件合作伙伴正在多個領域不斷拓展,為OEM廠商提供了支持下一代終端側AI特性的更多預優化算法。AI Engine還能讓AI帶來更多的變革,比如汽車行業、工業、物流和零售等。