大模型,具有強大的理解、生成能力;終端設備,是人與AI的首選交互入口。二者碰撞之下,讓端側成為大模型落地的最佳途徑,甚至沒有之一。越來越多的手機、PC、汽車等消費電子終端廠商,將AI技術應用到自己的產品和服務中,而端側AI的繁榮景象離不開一個核心支撐點——計算平臺(芯片)。
端側算力,從芯而來。所以高性能芯片,是端側AI持續繁榮的源頭力量,也是高通希望借助技術創新、生態合作所推動的方向。
前不久恰逢驍龍峰會舉辦,我們看到高通公司繼續強化終端側AI產品布局和對國內大模型的支持。不僅宣布了與智譜、騰訊混元等大模型廠商的合作,共同推動端側 AI 模型部署和落地。此外,還推出了面向AI手機的驍龍 8 至尊版移動平臺和面向智能汽車的驍龍至尊版汽車平臺。
高通公司總裁兼CEO安蒙表示,AI,尤其是生成式AI,是移動計算領域最大的變革之一;高通關注生成式AI,尤其關注AI如何改變計算體驗,邊緣側將如何發展,及其如何帶來顛覆性的創新周期,致力于將AI為先的體驗帶入每一個計算空間。
端側AI的時代風口,源于高通為代表的移動計算,與AI深深地擁抱。我們不妨就從高通打造AI為先的體驗這一方向入手,去尋找端側AI向前一步的源頭力量。
2024年伊始,PC、手機、汽車等消費電子品類都開始積極與大模型相結合,打造全新的AI XX硬件,端側AI由此進入集中爆發階段。
可以說,大模型打開了一個消費電子領域的全新風口,而深入風眼中心,我們會看到一支推動端側AI醞釀并成熟的關鍵力量——移動計算。
端側AI之于云側AI的不可替代性,是大模型在本地進行計算,避免數據上云,解決用戶數據和隱私安全的顧慮;實時性更強,游戲、攝影、AIGC等應用在端側處理的時延更低、反饋更快、體驗更好。
進入2024,OpenAI、智譜、騰訊混元等第一梯隊的模型廠商都認識到了大模型落地端側的價值與桎梏,紛紛推出更小規模、更高性能的模型版本。雖然大模型在積極小型化,但受到端側計算能力、內存空間等限制,模型的減配、壓縮也會折損標準通用基礎大模型的性能表現。
大模型的端側部署,十分依賴于端側計算平臺提供強大性能,支撐超大規模的數據運算量,并在性能與功耗之間實現平衡。
讓大模型更好地適配端側,成了移動計算領域的首要任務,高通正在積極地解決中。
在前不久的驍龍峰會上,高通宣布和智譜、騰訊混元合作,共同推動端側 AI 模型部署和落地。我們能從高通的全新動作中,看到移動計算+大模型的三個變化:
變化一:更豐富的端側AI能力。驍龍8至尊版的NPU性能比上一代提升了45%,強大的性能可以同時運行多個AI工作負載,這意味著更多基于大模型的AI應用能夠在端側部署。
變化二:更優質的端側智慧體驗。高通為驍龍8至尊版配備目前最高速的LPDDR5x內存,解決了內存顧慮。目前,騰訊混元正通過和高通合作,推動7B和3B的混元大模型在終端部署。
變化三:更健壯的端側AI生態。AI開發者是端側AI持續繁榮不可或缺的角色,高通為開發者準備了基于自身硬件的高效開發工具,包括高通AI軟件棧(AI Stack)和AI Hub,與騰訊混元和智譜AI達成合作,幫助模型廠商在高通硬件上更好地釋放平臺算力,支持AI開發者輕松地將AI模型集成到應用程序中。
根據驍龍峰會高通公布的數據,充分利用驍龍8至尊版的強大終端側AI性能和高通AI軟件棧為模型帶來的性能優化,智譜GLM-4V端側視覺大模型能夠以超過70 tokens/秒的速度在終端側高速運行。大模型的端側性能表現優化,不僅會降低開發者的使用成本,提升開發者的產品效果,也有助于基礎通用大模型的商業化。
大模型,是端側AI這一時代風口的起點;移動計算,則從更多應用、更優體驗、更強生態等方面,為大模型在端側提供動力保障。
高通對大模型的有力支撐,從源頭支持端側AI的產業繁榮,正是推動AI為先體驗的體現之一。
大模型要在終端設備上被用戶用起來,才能從一種技術趨勢,轉變為端側AI的產業繁榮與商業價值。AI大模型入端,硬件性能是基礎。
我們采訪過一位AI手機品牌的負責人就表示:AI在手機行業剛剛開始,未來的一年,AI體驗會超出你的想象,而端側模型對性能要求很高,所以性能永遠不會過剩。
性能從哪里來?答案就是計算平臺。針對目前端側AI集中的兩大品類:一個是個人移動終端,比如AI手機、AI PC;另一個是智能網聯汽車,智能座艙、輔助駕駛、自動駕駛等AI應用都在加速上車。高通在前不久的驍龍峰會上帶來了兩大平臺的最新技術和產品。
移動平臺方面:
驍龍8至尊版芯片,憑借技術方面的性能突破和創新能力,帶來了AI手機智能化的重大飛躍。
驍龍8至尊版在終端側生成式AI、多模態處理和影像處理等方面的突破,可以為AI手機的大量AI用例提供支持。比如AI-ISP技術的革命性突破,與NPU緊密結合,使得高分辨率影像數據的實時處理成為可能,手機廠商可以在攝影功能中引入更多AI應用,如自動場景識別、實時美顏和自動對焦等,這是當下年輕消費群體格外看重的產品力之一。
此外,驍龍平臺還積極支持PC領域的AI應用。
在剛剛舉辦的2024年世界互聯網大會上,高通憑借其專為Windows 11 AI+ PC設計的驍龍X Elite平臺榮獲“世界互聯網大會領先科技獎”。驍龍X Elite的核心優勢之一是采用了定制化的Oryon CPU,具備極致快速的響應速度,可以為AI PC提供強勁的性能表現。比如榮耀最新推出的AI PC,就在驍龍X Elite的算力支持下,實現了AI紀要、AI雙向降噪等AI功能,極大地提升了用戶的會議和溝通效率。目前,驍龍X系列已支持58款已發布或正在開發中的PC產品,有力支撐了AI PC這一新品類的成長。
汽車平臺方面:
汽車智能化成為大勢所趨,其中智能座艙、智能駕駛,成為車企的核心賽點。為智能汽車提供底層源動力,高通分別推出了全新的驍龍座艙至尊版平臺和Snapdragon Ride至尊版平臺。
其中,驍龍座艙至尊版平臺也采用了專為汽車打造的高通自研Oryon CPU,性能大幅提升,可以助力車企實現大模型和AIGC等能力與座艙相結合,打造AI語音助手、AIGC應用、復雜情境感知、自然語言交互等新體驗。
Snapdragon Ride至尊版平臺也基于高通最先進的NPU及Oryon CPU,將更好的智能駕駛帶到汽車上,實現了高精度定位、環境感知、決策規劃以及車輛控制等一系列智能駕駛功能。
此外值得一提的是,增強AI手機、AI PC、智能汽車的產品力,更強大的移動計算硬件只是必要條件。除此之外,廠商和開發者還需要一系列開發工作來釋放硬件性能、優化端側AI表現。
目前,手機、PC、汽車等采用的驍龍硬件平臺,均已集成高通自研Oryon CPU,加之高通AI軟件棧的賦能,有望實現終端側AI應用在各平臺高效開發。
硬件(移動平臺、PC平臺和汽車平臺)與軟件(AI Stack、AI Hub)相協同,高通正在拆除端側AI的性能桎梏,帶動手機、汽車等各類消費電子產品加速進化,抓住大模型的技術紅利。
總結一下,大模型是這一輪端側AI浪潮的起點,計算硬件是AI終端這一新概念得以落地的性能源泉。支撐大模型和AI終端的持續發展,高通也在源頭為端側AI繁榮貢獻了力量。
之所以要在今天找尋端側AI發展的源頭力量,是因為這與國內消費電子廠商抓緊時代機遇和技術趨勢的需求一致,與源頭緊密合作、齊頭并進,有利于獲取向未來生長的動能。
目前來看,高通就是與國內廠商合作緊密的重要AI力量之一。
一方面,高通和驍龍平臺是國內安卓手機廠商全球化、高端化的助力。國內頭部品牌正在高端市場與蘋果展開正面競爭。高通和驍龍與國內廠商的緊密合作,成為國內智能手機品牌在全球的競爭力保障,可以讓領先的AI應用、AI手機、AI PC硬件,為全球樹立標桿。目前,首批搭載驍龍8至尊版的旗艦手機,如小米、榮耀、iQOO等,已經在性價比、影像能力、游戲性能等方面,建立了鮮明的市場認知度。
此外,新能源汽車增長也有望更進一步。
目前,國內新能源汽車已經在全球市場建立了較強的競爭力,抓住智能化機遇,獲得更大的發展,可以進一步夯實優勢地位。驍龍汽車平臺就相當于基石,支撐基于大模型的智能駕駛、智能座艙上車,讓新能源汽車保持競爭優勢,在全球市場走得更穩更遠。
對于端側AI來說,大模型就是新一代的操作系統,而用好這一新型操作系統,需要生態、工具、資源的充分支持。通過驍龍的軟硬件生態體系,高通可以為端側AI的發展提供生態助力,幫助更多開發者用好大模型技術,促進AI產品與應用程序的整體繁榮。
總結一下,終端消費電子的市場廣闊,智能化升級才剛剛開始。AI將席卷我們熟悉的各個終端品類,站在時代風口,高通和驍龍作為源頭動力的身影,也漸漸明晰起來。
高通和驍龍與AI的緊密擁抱,帶來的是移動計算與端側AI的長相廝守。狂奔一年的端側AI故事,會繼續講述下去。
審核編輯 黃宇
-
芯片
+關注
關注
456文章
51019瀏覽量
425343 -
AI
+關注
關注
87文章
31262瀏覽量
269621 -
智能計算
+關注
關注
0文章
179瀏覽量
16514
發布評論請先 登錄
相關推薦
評論