作為一家車載智能硬件行業的資深玩家,肇觀電子致力于為主機廠提供高性能并經嚴格測試的智能汽車零部件。在汽車電子產業鏈Tier 1 系統集成廠商長期處于國際寡頭壟斷的市場格局下,包括肇觀電子在內的國內企業始終創新求生,不斷提升產品競爭力。隨著工信部要求加快國產化替代,加快布局和發展國產汽車電子芯片,肇觀電子迎來機遇。 最近上市的一款國產車規AI芯片NE-V163A由上海肇觀電子研發。融合了計算機視覺算法、AI和深度學習等先進技術。
一
硬件配置
先讓我們看一下肇觀電子NE-V163A開發板的外觀:
▲肇觀電子 NE-V163A開發板
開發板預留了豐富的I/O接口,有音視頻接口、控制和調試接口、SD存儲卡、USB和網絡接口等等,都集成在了一塊板子里,基于這些接口可以非常方便地擴展出復雜的功能。值得一提的是:板子上標配1 GB內存(DDR3200),8GB EMMC,128Mb Flash, 這個配置相當闊綽,和NE-V163A 強悍的性能很配,用來跑重型任務無需擔心內存。 下面是官方公布的硬件配置說明
開發板配件考慮很周到,有TF卡、TF轉USB外設、電源、還配備了官方支持的OV4689傳感器連接板,連接板直接插到NE-V163A的MIPI擴展連接器的位置。TF卡用來存神經網絡模型,這東西太小了經常找不到,廠家比較貼心送了一個。
廠家提供了快速啟動說明書,通過簡單的幾下操作,開發板的硬件環境連接無腦完成,和上圖一樣。
二
如何啟動
按照官方的說法,只要簡單幾個步驟就能實現我們想要實現的各種功能,先對主芯片NE-V163A做個理論鋪墊。
主芯片NE-V163A的規格介紹不在此贅述。再來啟動卡燒錄,使用Windows調試計算機,并安裝串口usb驅動程序: ?CP210x_Universal_Windows_Driver 驅動安裝好后,使用MicroUSB數據線連接開發板和計算機,給開發板上電,在計算機的設備管理器看到了串口通信的端口號,并記下了該端口號,接下來通信時會用到。
用市面上常見的測試工具PotPlayer播放器 測試rtsp視頻流,看視頻流的分辨率和幀率是否正常,畫面的曝光和顏色是否隨場景變化能夠正常調整:
ISP處理性能和H.265編碼性能達到了4K@30fps。畫面穩定,無卡頓。 以上是最基本的開機測試過程,更進一步的測試就需要用串口調試工具登錄到開發板的系統里,看一下系統的輸出信息。選用SecureCRT,這是嵌入式開發人員的標配工具,專門用于調試開發板的。若以前未接觸過肇觀開發板,建議先看官方提供的技術資料,熟悉軟硬件環境。
硬件連接環境,燒錄TF卡
映像文件路徑選中SDK編譯出來的映像
設備選擇TF卡
點擊寫入等待燒錄完畢即可
TF卡燒錄完畢后將其插入開發板;開發板和計算機連接好,通電,按下上電開關。
打開SecureCRT,選擇快速連接
選擇Serial協議,選擇在計算機設備管理器記錄的端口號,其他參數按照圖示設置
連接后,按下回車,等到出現歡迎信息后,輸入root按回車進入
想要讓板子活起來,需要花一點功夫,至少跟著《操作手冊》插插線,動動鼠標。對于熟悉海思或類似方案開發的人員應該能比較快速上手,基本風格相差不多。
三
開發效果如何?Demo一下!
啟動完以后,要進行自我算法的開發,比如車廠需要肇觀電子提供檢測駕駛員是否有疲勞駕駛或者打電話的智能零部件(DMS),又或者要能夠辨別出道路上直行或左轉的標線,區分紅綠燈以提示制動或行駛,判斷前車離我們的距離等等(ADAS),就需要計算機視覺幫助進行內容理解和幾何理解。 肇觀電子為展示NE-V163A開發板穩定的SDK、強大的CNN,良好的ISP等等,開發板上已內置很多demo腳本,只要簡單跑一下就能檢閱結果了:
這么多寶貝,一看就很讓人激動,接下來我們隨手挑兩個腳本跑一下。
【Demo 1】 運行vi_vpss_depth_bt1120_720p_720p_imx291_stitching_fusion (1)使用HDMI線連接NE-V163A開發板和顯示器。 (2)進入/product/media/vi_vpss_depth_venc_rtsp_vo,執行對應的腳本: cd/product/media/vi_vpss_depth_venc_rtsp_vo ./vi_vpss_depth_bt1120_720p_720p_imx291_stitching_fusion.sh 【結果】
顯示器輸出:雙目720p@25fps的實時深度視頻+左相機實時視頻+右相機實時視頻。
【Demo 2】
運行vi_cnn_venc_rtsp_vo
(1)使用網線連接NE-V163A開發板和Windows調試計算機。
(2)配置NE-V163A開發板的網絡地址和Windows調試計算機在同一個網段,確保可以ping通,參考腳本如下:
(3)進入/product/media/vi_cnn_venc_rtsp_vo,執行對應的腳本:
(4)在Windows調試計算機打開PotPlayer(PotPlayer1),輸入rtsp://192.168.30.77:5540/live0,播放主碼流的實時視頻,如下所示:
(5)在Windows調試計算機打開另一個PotPlayer(PotPlayer2),輸入rtsp://192.168.30.77:5541/live1,播放輔碼流的實時視頻。
【結果】
PotPlayer1輸出:實時視頻+物體識別框。
PotPlayer2輸出:實時視頻。
SecureCRT控制臺輸出:CNN的處理時間和處理結果。
提示信息很友好,想看的信息都在,而且結果顯示芯片的CNN性能確實卓越非凡。
四
性能和壽命
芯片的性能和壽命是產品的關鍵,需經過長期批量測試,一般至少要幾百顆芯片經歷過一兩個冬夏循環后才能比較靠譜。
AEC-Q100對于Tier 1 的工程師應不陌生,這是汽車電子協會AEC (Automotive Electronics Council) 制定和推動的一套質量控制標準。大致流程是從廠家提供的待測芯片中隨機抽取幾千顆,對這些芯片進行嚴格測試后,再逐一進行苛刻的質量和可靠性確認。由于車載電子設備涉及到用戶生命和財產安全,因此,相比消費和工業電子設備而言,車規級芯片的測試項目更加繁復、測試環境更加惡劣、通過標準更加嚴苛,對質量系統和安全系統要求極高。AEC-Q100測試涉及幾十項測試要求,被測芯片必需通過全面測試芯片產品的可靠性指標,從而確保系統產品在整個生命周期的可靠性。
在AEC-Q100溫度循環測試中,NE-V163A芯片在-40°C至+105°C環境下多次迭代進行1000小時的測試,確保芯片能夠在此測試溫度下保持正常工作;以人為加速老化的方式測試芯片,依然確保芯片在產品使用中的可靠性和壽命。 總結一下,NE-V163A開發板套件硬件配置豐富,配件周到, 接口豐富;通過運行的兩個官方提供的腳本demo程序,我們初步認為, ISP干凈通透,色彩純正,圖像清晰;H265編碼流暢穩定,CNN運算實時高效,功耗常規,符合大家和市場對它的預期,尤其特別重點說明的是NE-V163A的雙目depth功能,點云圖穩定清晰,層次分明,60cm處測試人臉五官深度清晰,精度很高。
原文標題:國產車規AI芯片肇觀電子NE-V163A開發板新體驗
文章出處:【微信公眾號:佐思汽車研究】歡迎添加關注!文章轉載請注明出處。
責任編輯:haq
-
芯片
+關注
關注
455文章
50817瀏覽量
423676 -
AI
+關注
關注
87文章
30896瀏覽量
269110
發布評論請先 登錄
相關推薦
評論