在高通人工智能開放日上,高通與vivo、騰訊王者榮耀和騰訊AI Lab共同宣布,四方正利用第四代高通人工智能引擎AI Engine,以“想象力工程”為名,通過發揮各方在AI領域的專長,拓展AI生態系統的跨產業合作,同時借助終端側AI不斷提升的算力優勢,探索AI能夠為終端帶來更智能、更高效的體驗。
作為“想象力工程”的首個落地項目,四方充分利用驍龍855移動平臺上第四代AI Engine的異構計算能力,在vivo的iQOO手機上將移動游戲的AI推理能力首次大規模從云端遷移至終端側,讓以《王者榮耀》為代表的多人實時戰術競技(MOBA)類游戲獲得體驗的升級和優化。
“借助此次四方的合作,希望能夠攜手生態系統合作伙伴,探索終端側創新的AI特性和應用。”高通中國區董事長孟樸表示,高通一直致力于推動人工智能在終端側的應用和落地,通過高通人工智能引擎AI Engine,與AI生態系統合作伙伴共同打造豐富的用例和創新的用戶體驗。
vivo創新創意領域總經理王友飛表示,從今年3月發布iQOO開始,vivo推出全新的Multi-Turbo,并打造移動端AI電競戰隊SUPEX,希望通過MOBA類游戲場景的實驗環境來不斷提升和優化AI電競戰隊的實力,為移動電競帶來更好的競技體驗。
騰訊王者榮耀技術總監鄧君表示,此次與高通、vivo和騰訊AI Lab合作,是王者榮耀在5G和AI技術不斷發展的大背景下,積極探索先進技術對娛樂產業突破傳統,創新發展的可能。
騰訊AI Lab技術總監付強表示,隨著5G時代的到來,與高通、vivo和王者榮耀開展合作,將共同推動云端AI向無線邊緣和終端側AI進一步落地。
目前,很多對神經網絡的訓練和推理都是在云端或者基于服務器完成。當下,隨著移動平臺性能和算力的不斷提升,人工智能正從云端向終端側邁進。去年底,高通發布第四代多核AI Engine,正是驍龍移動平臺上加速終端側AI用戶體驗的硬件與軟件組件的集合。
憑借人工智能引擎AI Engine的強勢領銜,安卓手機最重要的的芯片供應商之一高通為整個手機行業注入了新鮮的血液,造就了一個又一個“AI推動生態進化”的巨大進步。下面,我們就扒一扒AI Engine的底,深挖一下,高通的AI Engine是怎樣提升手機“產品力”的。
高通人工智能引擎AI Engine:驍龍移動平臺自帶的“主角光環”
高通對于AI基礎科學的研究,技術成果集中體現在AI Engine上,但最早可以追述到十幾年前。AI Engine普遍見于驍龍600、驍龍700和驍龍800系列移動平臺上,從驍龍820起就一直是驍龍800系列旗艦芯片的標配,目前已經發展到第四代。其基本的原理則是“異構計算”。
以第四代AI Engine為例,它采用了異構多核可編程架構,優化提升內核性能,提升AI計算效率與靈活性。驍龍855移動平臺的Kryo 485 CPU、Adreno 640 以及DSP共同構成了第四代AI Engine的“三駕馬車”。
其中,第四代AI Engine的DSP包括兩個Hexagon向量加速器和一個Hexagon張量加速器,可提升20%的算力,并獨立完成每一層神經網絡計算(其架構設計完全不同)。相應的,Adreno 640 GPU算術邏輯單元提升了50% ,進一步加速更高精度神經網絡的運行。Kryo 485 CPU則新增了點積指令,以便提升AI性能。三者合一,實現了3倍的AI性能提升和可編程的綜合AI加速。
而正如絕大多數具有重大意義的商用技術成果一樣,AI Engine同樣需要賦能終端設備和軟件生態才能夠更充分地發揮作用。現階段,AI Engine可以在框架搭建、操作系統、生態系統和終端設備上發力,帶來拍攝、生物識別、游戲等多個層面的新特性。
生態用例——與軟件服務商、云服務商的合作
正如高通產品管理高級副總裁Keith Kressin所說的那樣,用例才是高通最為關心的,首先要關注的就是軟件生態了。
目前高通的軟件合作伙伴包括但不限于拍攝領域的虹軟、曠視科技、Loom.ai、Nalbi、潑辣、創通聯達、Uncanny Vision, 音頻與翻譯領域的有道、思必馳、大象聲科、科大訊飛,手勢領域的Elliptic Labs、Qeexo,AR領域的網易、商湯科技和汽車領域的Cogent Embedded Technology、PathPartner Technologies、縱目科技等。
它們為手機廠商帶來了超級分辨率、美顏和夜拍等強大的AI性能,還與Nalbi合作實現了智能人像發色轉換、先拍照后虛化、選擇多人或物體進行虛化等功能。
①智能人像發色轉換
智能的人像發色轉換
對于愛美的妹子來講,染發自然是必不可少的。在智能的人像發色轉換功能的加持之下,妹子們就可以在拍攝界面預覽自己想要嘗試的發色,防止染發“翻車”——這個功能可謂相當貼心,畢竟妹子們的口紅都有上百個色號!
②先拍照后虛化&選擇多人或物體進行虛化
先拍照后虛化
選擇多人或物體進行虛化
在Nalbi基于高通人工智能引擎AI Engine實現的先拍照后虛化的技術加持下,用戶還可以在拍完照片后獲得更好的虛化效果以便突出自己,或者在慘遭搶鏡后想要挽救照片效果。而在合照之中,如果你想虛化背景突出所有人,或者單純想獲取更強的圖片層次感,可以選擇多人或物體進行虛化。
當然了,高通在AI智慧生態方面的用例也非常廣闊,覆蓋了移動終端、AR/VR、IoT拍攝等多個領域,參照上圖,你會發現,AI Engine的行業應用前景是無比廣闊的。與此同時,高通還與騰訊、百度、谷歌、微軟等企業進行了AI云服務方面的合作。
賦能手機終端:拍攝&游戲一馬當先
要說AI Engine賦能智能手機終端設備最鮮明的用例,拍照和游戲自然一馬當先。在拍照方面,高通在全球率先推出了業界首款計算機視覺ISP(CV-ISP),這項技術能夠讓終端處理圖形的速度更快,同時功耗也更低,相應的,也帶來了諸多強大的AI拍攝特性。
比如iQOO搭載的AI美顏相機,背后就是AI Engine的功勞,它自帶的瘦身功能可以自動幫你拍出高挑的身材瘦長的大腿,比起換發高級多了;
另外在拍照的時候,身為新手的我們往往控制不好景別,難以突出主題。這次iQOO特意加入了AI裁剪構圖,能夠在相冊里面對圖片進行二次智能構圖,讓你瞬間變身攝影老法師,這背后其實就是AI深度應用的趨勢。
當然,這些功能也僅僅是一部分,遠非全部。現階段智慧識屏、智慧識物等幾乎成為新近中高端機型的標配,可以進行翻譯、識別并跳轉購物鏈接等操作。
而在游戲方面,Snapdragon Elite Gaming目前已經在黑鯊游戲手機2這樣的游戲手機上得到了應用,這雨其采用了驍龍855移動平臺不無關系。通過面向游戲優化且完整集成于頂級移動平臺驍龍855上的一整套軟硬件特性,玩家可以獲得包括流暢的交互、出色的性能、極快的響應、絕佳的音頻以及電影級的圖形效果等在內的全新游戲體驗。
Snapdragon Elite Gaming本身則具有True HDR游戲渲染及顯示、基于物理渲染(PBR)、Vulkan 1.1、電影級的后處理等功能。
True HDR可帶來更廣的色彩范圍,讓高光區域更清晰,陰影區域更具細節,提升游戲視覺張力;PBR則可保證游戲畫面的清晰度與偏于真實的細節;Vulkan 1.1賦予了開發者更多自由創作空間;電影級的后處理則讓開發者在通過電影級的分級調色、景深效果、電影級色調映射等提升游戲藝術感。
此外,Snapdragon Elite Gaming還可減少游戲卡頓、加速游戲啟動時間、降低網絡時延,全方位提升游戲體驗。長遠來看,Snapdragon Elite Gaming在iQOO、黑鯊游戲手機2、小米9等機型上的巨大成功,無疑給了其他廠商更多選擇驍龍855系列芯片和AI Engine的理由。當然,正如上文所說,拍攝和游戲也僅僅是AI Engine用例的冰山一角。
5G時代:云端特性落實到終端設備
而在5G商用的當下,蓬勃發展的AI與5G勢必會碰撞出不一樣的火花。AI Engine強大的算力和5G強大的網絡吞吐能力,勢必可以使得很多云端處理的AI用例開始向終端遷移。高通方面將會把AI模型的訓練放在云端,再將一些AI推理逐漸遷移至如智能手機這樣的終端側,形成一個網狀的生態系統,使之具備終端側在隱私、性能、個性化和可靠性方面的優勢。
在5G通訊方面,AI增強的基帶與射頻前端勢必會在未來得到廣泛應用,而AI和5G則可以各取所長,共同賦能尖端的XR體驗。以這些AI和5G互通的用例點為契機,高通可以逐步開掘5G的全部潛力,推進“AI+5G”戰略的實施。
-
高通
+關注
關注
76文章
7504瀏覽量
190976 -
AI
+關注
關注
87文章
31463瀏覽量
269857
原文標題:厲害|高通正利用“AI Engine”加速AI從云端走向終端應用和落地!
文章出處:【微信號:aicapital,微信公眾號:全球人工智能】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論