2016年是無人駕駛技術飛速發展的一年，360全景以及ADAS中的圖像處理都取得了各自的成績并逐漸走向融合。360全景的方案上加上ADAS，如LDWS車道保持警告系統，能夠實時的偵測車輛周邊的狀況，從而避免交通意外的發生，減少生命和財產的損失，駕駛者可以更加享受駕駛的樂趣。360全景的應用已經在國內外某些車廠成為覆蓋高中低端車型的標配，在基于360全景的系統中， ADAS相關的功能應用正不斷的增加和提升。


?

瑞薩電子中國 應用技術中心 汽車電子部 資深工程師應毅辰

由于360全景的逐漸普及，多圖像融合也加速了產業鏈的整合速度，巨頭紛紛通過收購圖像處理公司等方式來增強自身業務范圍，縮短產品周期。但360全景需要將安裝在車輛前后左右的四個攝像頭的圖像進行處理，拼接并且顯示出來，這需要圖像處理的各種算法來實現攝像頭采集的畫面進行無縫拼接，如何調試不同的攝像頭參數讓整個全景的畫面顯示達到一致的效果，移動中的車輛，360全景的畫面會不會丟失等等問題都需要在360全景+ADAS圖像算法技術融合來解決。

因此，對SoC芯片的圖像處理能力和速度要求會越來越高，對半導體廠商也帶來更多的商機。瑞薩電子R-Car產品系列在ADAS圖像融合的應用中也推出各種產品和方案，尤其針對360全景，R-Car的產品可以支持4~8路的高清攝像頭輸入，為了讓客戶可以更快把產品開發出來，瑞薩電子也提供一系列360全景和ADAS應用的開發套件。

在360全景展現時，二維圖像處理不到位會造成司機理解困難，因此逐漸向3D過渡；而要實現相關的ADAS功能，圖像的清晰度很重要。由于30萬像素的模擬攝像頭采集回來的圖像信息不夠清晰，360全景的標清方案能夠加上ADAS的功能并不多。用上百萬像素攝像頭的高清方案，可以實現2D和3D的360全景高清圖像。瑞薩R-Car產品集成了專用的2D，3D的圖像處理器，在ADAS方面有專用的圖像糾正（IMR）和識別（IMP）應用的處理器，并且提供相關的軟件庫方便客戶進行算法和應用的開發。

在芯片方面，隨著多圖像處理技術的發展，圖像處理逐漸從專用芯片向SoC多芯片集成方向發展，瑞薩電子SoC產品R-Car系列已經集成各種圖像處理器，如新一代的R-Car產品采用了16nm的工藝，R-Car H3帶有8個ARM核，它已經被廣泛用于ADAS相關的項目開發，產品具有高性能的2D/3D圖型處理器，內置了攝像頭變形矯正IMR處理器，以及專用于ADAS圖像識別的IMP第5代處理器，可以支持最多8路攝像頭輸入和3路視頻輸出，還會滿足功能安全ISO26262的ASIL B等級要求，產品具有性能高功耗低的優勢。

在最近舉辦的慕尼黑電子展中，瑞薩電子也帶來了基于其R-Car車載SoC與符合汽車ISO26262 ASIL-D功能安全標準的RH850 P1x芯片搭建的云端聯合自動泊車系統。該系統通過網絡連接到云端的實時停車管理系統以獲取信息，并綜合攝像頭和傳感器等信息，確認車輛周邊環境，利用多核芯片進行實時處理，阻隔外部數據的威脅，實現安全的自動泊車，可很好應對大城市陌生地點停車的難題。該方案中還充分利用了R-Car H3 全景環視系統及Ethernet和CAN-FD車載網絡新技術。

汽車產業鏈各環節均在積極備戰無人駕駛技術，視覺提供給汽車的功能也越來越多，在小體積化的要求下，除360全景和ADAS集成外，其他圖像處理也將匯集一處，瑞薩電子推出的R-Car產品具有駕駛艙（Cockpits）應用的概念，系統除360全景和ADAS集成外，虛擬圖形儀表，導航多媒體信息娛樂也匯集在內。視覺是無人駕駛技術重要的一部分，行人，車輛，車道線和交通標志檢測都是需要圖像芯片和算法進行處理。芯片對越來越復雜的圖像進行處理，壓縮，解碼和傳輸速度，算法實現的運行速度等等要求會越來越快，瑞薩電子將持續研發和推出R-Car產品來滿足汽車無人駕駛技術的要求。