算力用於實際 高通AI Engine強勢賦能手機行業

今年,正如如雨後春筍般跨入元年的5G一樣,手機AI也持續著自己蓬勃的生命力,發揮著自己不可或缺的作用,即將迎來自己的下一個風口。而就在近年,硬體級的AI運算能力在手機行業蔚然成風,成為了高階旗艦機型必不可少的元素。
憑藉人工智慧引擎AI Engine的強勢領銜,安卓手機最重要的的晶片供應商之一高通為整個手機行業注入了新鮮的血液,造就了一個又一個“AI推動生態進化”的巨大進步。下面,我們就扒一扒AI Engine的底,深挖一下,高通的AI Engine是怎樣提升手機“產品力”的。
高通人工智慧引擎AI Engine:驍龍移動平臺自帶的“主角光環”
高通對於AI基礎科學的研究,技術成果集中體現在AI Engine上,但最早可以追述到十幾年前。AI Engine普遍見於驍龍600、驍龍700和驍龍800系列移動平臺上,從驍龍820起就一直是驍龍800系列旗艦晶片的標配,目前已經發展到第四代。其基本的原理則是“異構計算”。
以第四代AI Engine為例,它採用了異構多核可程式設計架構,優化提升核心效能,提升AI計算效率與靈活性。驍龍855移動平臺的Kryo 485 CPU、Adreno 640 以及DSP共同構成了第四代AI Engine的“三駕馬車”。
其中,第四代AI Engine的DSP包括兩個Hexagon向量加速器和一個Hexagon張量加速器,可提升20%的算力,並獨立完成每一層神經網路計算(其架構設計完全不同)。 相應的,Adreno 640 GPU算術邏輯單元提升了50% ,進一步加速更高精度神經網路的執行。Kryo 485 CPU則新增了點積指令,以便提升AI效能。三者合一,實現了3倍的AI效能提升和可程式設計的綜合AI加速。
而正如絕大多數具有重大意義的商用技術成果一樣,AI Engine同樣需要賦能終端裝置和軟體生態才能夠更充分地發揮作用。現階段,AI Engine可以在框架搭建、作業系統、生態系統和終端裝置上發力,帶來拍攝、生物識別、遊戲等多個層面的新特性。
生態用例——與軟體服務商、雲服務商的合作
正如高通產品管理高階副總裁Keith Kressin所說的那樣,用例才是高通最為關心的,首先要關注的就是軟體生態了。
目前高通的軟體合作伙伴包括但不限於拍攝領域的虹軟、曠視科技、Loom.ai、Nalbi、潑辣、創通聯達、Uncanny Vision, 音訊與翻譯領域的有道、思必馳、大象聲科、科大訊飛,手勢領域的Elliptic Labs、Qeexo,AR領域的網易、商湯科技和汽車領域的Cogent Embedded Technology、PathPartner Technologies、縱目科技等。
它們為手機廠商帶來了超級解析度、美顏和夜拍等強大的AI效能,還與Nalbi合作實現了智慧人像髮色轉換、先拍照後虛化、選擇多人或物體進行虛化等功能。
①智慧人像髮色轉換
智慧的人像髮色轉換
對於愛美的妹子來講,染髮自然是必不可少的。在智慧的人像髮色轉換功能的加持之下,妹子們就可以在拍攝介面預覽自己想要嘗試的髮色,防止染髮“翻車”——這個功能可謂相當貼心,畢竟妹子們的口紅都有上百個色號!
②先拍照後虛化&選擇多人或物體進行虛化
先拍照後虛化
選擇多人或物體進行虛化
在Nalbi基於高通人工智慧引擎AI Engine實現的先拍照後虛化的技術加持下,使用者還可以在拍完照片後獲得更好的虛化效果以便突出自己,或者在慘遭搶鏡後想要挽救照片效果。而在合照之中,如果你想虛化背景突出所有人,或者單純想獲取更強的圖片層次感,可以選擇多人或物體進行虛化。
當然了,高通在AI智慧生態方面的用例也非常廣闊,覆蓋了移動終端、AR/VR、IoT拍攝等多個領域,參照上圖,你會發現,AI Engine的行業應用前景是無比廣闊的。與此同時,高通還與騰訊、百度、谷歌、微軟等企業進行了AI雲服務方面的合作。
賦能手機終端: &遊戲一馬當先
要說AI Engine賦能智慧手機終端裝置最鮮明的用例,拍照和遊戲自然一馬當先。在拍照方面,高通在全球率先推出了業界首款計算機視覺ISP(CV-ISP),這項技術能夠讓終端處理圖形的速度更快,同時功耗也更低,相應的,也帶來了諸多強大的AI拍攝特性。
比如iQOO搭載的AI美顏相機,背後就是AI Engine的功勞,它自帶的瘦身功能可以自動幫你拍出高挑的身材瘦長的大腿,比起換髮高階多了;
另外在拍照的時候,身為新手的我們往往控制不好景別,難以突出主題。這次iQOO特意加入了AI裁剪構圖,能夠在相簿裡面對圖片進行二次智慧構圖,讓你瞬間變身攝影老法師,這背後其實就是AI深度應用的趨勢。
當然,這些功能也僅僅是一部分,遠非全部。現階段智慧識屏、智慧識物等幾乎成為新近中高階機型的標配,可以進行翻譯、識別並跳轉購物連結等操作。
而在遊戲方面,Snapdragon Elite Gaming目前已經在黑鯊遊戲手機2這樣的遊戲手機上得到了應用,這雨其採用了驍龍855移動平臺不無關係。通過面向遊戲優化且完整集成於頂級移動平臺驍龍855上的一整套軟硬體特性,玩家可以獲得包括流暢的互動、出色的效能、極快的響應、絕佳的音訊以及電影級的圖形效果等在內的全新遊戲體驗。
Snapdragon Elite Gaming本身則具有True HDR遊戲渲染及顯示、基於物理渲染(PBR)、Vulkan 1.1、電影級的後處理等功能。
True HDR可帶來更廣的色彩範圍,讓高光區域更清晰,陰影區域更具細節,提升遊戲視覺張力;PBR則可保證遊戲畫面的清晰度與偏於真實的細節;Vulkan 1.1賦予了開發者更多自由創作空間;電影級的後處理則讓開發者在通過電影級的分級調色、景深效果、電影級色調對映等提升遊戲藝術感。
此外,Snapdragon Elite Gaming還可減少遊戲卡頓、加速遊戲啟動時間、降低網路時延,全方位提升遊戲體驗。長遠來看,Snapdragon Elite Gaming在iQOO、黑鯊遊戲手機2、小米9等機型上的巨大成功,無疑給了其他廠商更多選擇驍龍855系列晶片和AI Engine的理由。當然,正如上文所說,拍攝和遊戲也僅僅是AI Engine用例的冰山一角。
5G時代:雲端特性落實到終端裝置
而在5G商用的當下,蓬勃發展的AI與5G勢必會碰撞出不一樣的火花。AI Engine強大的算力和5G強大的網路吞吐能力,勢必可以使得很多雲端處理的AI用例開始向終端遷移。高通方面將會把AI模型的訓練放在雲端,再將一些AI推理逐漸遷移至如智慧手機這樣的終端側,形成一個網狀的生態系統,使之具備終端側在隱私、效能、個性化和可靠性方面的優勢。
在5G通訊方面,AI增強的基帶與射頻前端勢必會在未來得到廣泛應用,而AI和5G則可以各取所長,共同賦能尖端的XR體驗。以這些AI和5G互通的用例點為契機,高通可以逐步開掘5G的全部潛力,推進“AI+5G”戰略的實施。
寫在最後
行業應用與生態打造是促進技術進一步迭代的重要支撐,與此前的研發測試等環節共同構成了一個閉環,這點AI Engine同樣不能免俗。經過幾年間在移動端的“摸爬滾打”,AI Engine身上十幾年的AI基礎科學功底開始逐步凸顯,成就了全面的AI生態。相信隨著驍龍移動平臺的升級與擴散,高算力的AI Engine能繼續施展拳腳,在5G時代抵達自己的下一個風口。