當前大模型蓬勃發展,OpenAI的Sora、ChatGPT、CLIP、DALL-E,Google的Gemini、ViT-22B,Meta的LLaMA3、DINO v2,以及其他國內外知名機構的Stable Diffusion、騰訊混元、通用千問、百度文心一言、科大訊飛星火、月之暗面Kimi等,共同塑造了AI技術的新生態。這些多模態大模型憑借其強大的多種數據處理能力,不僅能夠駕馭文本、圖像、音頻、視頻等常規數據類型,還展現出對時間序列、紅外、超光譜、X射線等特殊模態的融合創新,為智能體驗帶來了質的飛躍。
在此背景下,攝像頭成為連接實體世界與數字世界的關鍵紐帶,在諸多領域中激發了攝像頭應用的無限潛能:從智慧城市到智能駕駛,從工業監控到醫療影像……在人工智能、計算機視覺和深度學習等技術的驅動下,攝像頭技術正迎來全景、多維度、智能化的黃金發展期。
近日,在北京正印科技有限公司舉辦的光學成像質量技術研討會上,愛芯元智智慧IoT事業部產品副總裁吳煒受邀發表《愛芯元智AX650N 讓視覺更智能》的主題演講,深度解析邊端側智能SoC——AX650N,以其卓越性能與技術創新,為攝像頭賦予更強大、更智能的視覺處理能力,助力不同行業領域的領先發展。
近幾年來,隨著邊緣計算需求的激增,市場對邊端側SoC的功能與功耗成本如何做平衡提出了極高的要求,不僅需要SoC具備大算力、高帶寬、接口豐富,還要嚴格控制低功耗,成本效益顯著。因此,愛芯元智匠心打造出一款高算力,低功耗的智能SoC芯片——AX650N,為攝像頭智能化提供最佳澎湃動力。
AX650N
AX650N:全能配置 最適合邊端側的智能SoC
AX650N搭載三核NPU,支持Transformer架構,輔以雙核VDSP,賦予其強大的深度學習處理能力,能夠輕松應對各類復雜視覺任務。此外,該SoC具備豐富的接口配置,支持HDMI輸出、PCIe、SATA等,確保與各類設備的無縫對接。在編解碼方面,AX650N支持高達8K30fps的編碼和8K60fps的解碼,而且可以同時并行對32路1080p30fps視頻解碼,為多路高清視頻應用提供了強大后盾。而典型功耗僅4W,可采用被動散熱設計,甚至可以直接使用PoE供電,確保了產品可以在緊湊空間內穩定、高效運行。
在NPU方面,AX650N采用全自研創新架構,將應用、算法與芯片深度協同設計,針對特定場景進行深入優化,使愛芯通元NPU性能更突出,實現卓越能效比;另外,AX650N除了高效率支持CNN,還原生支持Transformer,適配以文搜圖大模型CLIP、開集目標檢測大模型OWL-ViT、以及SAM+lama等模型,讓圖像搜索更便捷,目標識別更精準,甚至讓用戶輕松掌握專業級圖像處理技能。
AX650N在Transformer(SwinT)模型上的性能表現遙遙領先,CNN主流網絡性能同樣顯著超越同儕
為了方便用戶更便捷地使用各種算法,愛芯元智還內置了自研AI算法,包括人形檢測、車形檢測、車牌檢測、非機動車檢測等,精準識別各類目標。除此之外,愛芯元智積極與算法生態伙伴合作,適配了12大類,超過200個細分領域算法,確保AX650N在各類項目中的快速部署與無縫應用,形成涵蓋智慧園區、智慧商業、智慧電力、智慧交通、智慧體測、智慧生態、智慧工地等眾多場景的行業的完整解決方案。
AX650N憑借豐富的接口,高能耗比,助力多種產品形態,包括高算力、低功耗、小封裝的智能卡;高算力、多路解碼、接口豐富的智能盒;支持44、HDR10、BT.2020色域、超低延遲的分布式坐席。
愛芯元智智慧IoT事業部產品負責人盧志洪介紹,隨著人工智能的落地,NPU作為關鍵載體,正驅動各行各業發生顛覆性革新。在傳統醫療領域,愛芯元智以AX650N為核心,開發了一系列涵蓋單攝、雙攝以及工業內窺鏡類的完整解決方案,通過深度融合AI技術與NPU算力,實現了從影像采集、智能解讀到決策支持的全流程智能化升級,為現代醫療開啟了“智慧之眼”,鋪就通往精準、高效診療的新里程。
01
AI-ISP與圖像識別技術提升醫療成像質量,如AI防抖、AI星光全彩、AI HDR、AI多光譜融合、AI場景增強及多傳感器融合,確保優異視覺效果。
02
混合精度算力快速解析CT、MRI、X光等影像,精準識別腫瘤、骨折、血管病變,大幅提升診斷準確率與效率。
03
NPU加速深度學習模型(如卷積神經網絡,CNN),實時分析影像,產出高精度分割圖、病灶標記與診斷建議。
04
實現二維影像到三維模型轉化,助力醫生進行空間定位、手術規劃及復雜結構可視化。
05
通過加速人工智能算法的運行,提高醫療數據處理效率與準確性,支撐診斷、治療、預防、管理等環節,推動精準醫療與智能化服務。
AX650N從技術上展現了愛芯元智對自研技術的升級突破,在實際應用中也證明了智能視覺芯片的領先地位。未來,愛芯元智將繼續推進技術創新,通過與各類生態合作伙伴的共同開發,AX650N會在更多智能化場景中大放異彩,推動物理世界數字化、智能化的發展。
審核編輯:劉清
-
ai技術
+關注
關注
1文章
1275瀏覽量
24325 -
愛芯元智
+關注
關注
1文章
81瀏覽量
4835 -
ChatGPT
+關注
關注
29文章
1561瀏覽量
7671 -
文心一言
+關注
關注
0文章
124瀏覽量
1280 -
大模型
+關注
關注
2文章
2450瀏覽量
2708
原文標題:愛芯元智AX650N:智能SoC視覺更澎湃
文章出處:【微信號:愛芯元智AXERA,微信公眾號:愛芯元智AXERA】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論