在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

純視覺VS多傳感器融合

貿澤電子 ? 來源:貿澤電子 ? 作者:貿澤電子 ? 2022-07-22 15:49 ? 次閱讀

自1939年通用汽車公司面向全球展示世界上第一輛自動駕駛概念車,此后的八十多年里,全球各大科技公司和車企陸續將傳感器、攝像頭、計算芯片、存儲芯片等塞進車子里,并不斷在軌道、沙漠等特定場景下去嘗試自動駕駛。時至今日,廠商已經在一點點讓自動駕駛滲透到家用車市場,并致力于在這個領域實現更高級別的自動駕駛。

然而,我們也能看到,在技術和方案推進的過程中,自動駕駛的實現方式出來了明顯的“派系之爭”。一派認為應該走視覺與雷達的融合路線;另一派則認為純視覺實現就足夠了。派系之爭的根源是當前每個廠商對自動駕駛都有自己的理解,且都取得了一定的效果。當然,通過貿澤電子網站上在售的、各種應用于自動駕駛的元器件,我們也發現了兩個派系之間的一些共同點,比如靈活設計和性能冗余等。那么,接下來就讓我們展開聊一聊。

純視覺 VS 多傳感器融合

對于自動駕駛,還有很多其他的叫法,比如無人駕駛電腦駕駛汽車或者輪式機器人等等。這些名稱的核心要義是通過計算機與人工智能技術的融合,代替人類駕駛員,讓車子自行完成完整、安全、有效的駕駛行為。無疑,這種智能化的駕乘體驗將會成為新時代汽車一個重要的賣點,吸引全球科技巨頭和車企紛紛投資布局。根據市場調研機構IHS Markit的預測數據,2022年全球自動駕駛汽車市場規模將達到1,629億美元,同比增長14%左右,預計2030年全球自動駕駛汽車市場規模將達到32,197億美元,年復合增長率高達45.21%。

b62c302c-07c0-11ed-ba43-dac502259ad0.png

圖1:全球自動駕駛汽車市場規模

(數據源自:IHS Markit)

在自動駕駛的設想下,當選定目的地后,汽車會利用導航系統規劃最佳路線,到達目的地,期間人類駕乘人員不需要為此分心,可以盡情享受科技帶來的便捷和舒適。然而,當人類駕駛汽車時,我們都會用“眼觀六路耳聽八方”來描述駕駛員的狀態,因此自動駕駛汽車需要具備比這更強的感知性能。環境感知與精準定位、路徑規劃、線控執行一起并稱自動駕駛四大核心技術。當汽車被置于社會應用場景下時安全可靠的感知是不可或缺的。

在環境感知上,純視覺方案僅依靠攝像頭搜集環境信息,然后將圖片傳輸到計算芯片進行分析,比較像人類駕駛車輛,通過眼睛來捕捉周圍的信息,然后傳輸給大腦做決策。當然,純視覺+AI的方案比人眼的視角更廣,通過大量的圖片信息讓汽車內部的計算系統擁有以車子為中心的“上帝視角”。純視覺方案的優點主要是,實現成本相對更低,更接近人類駕駛,通過高分辨率、高幀率的成像技術獲取的環境信息更加豐富;缺點主要是,攝像頭捕捉環境信息容易受到環境光的干擾,且純視覺方案對于圖像的處理更依賴訓練,難免出現環境認知的“死角”。目前,采用純視覺方案實現自動駕駛的企業主要有特斯拉、百度和極氪等。

“多傳感器融合”方案則是通過攝像頭、毫米波雷達、激光雷達等設備一起收集車輛的周邊信息。激光雷達的加入能夠獲取更深度的空間信息,對于物體的位置、距離和大小感知更準確,且由于激光雷達是自發光并不受環境光影響。不過,“多傳感器融合”方案也有自己的局限性,激光雷達容易受到雨雪霧天氣的影響。由于激光雷達本身數千美元的硬成本,加上“多傳感器融合”往往對計算芯片有更高的算力要求,因此成本沒有優勢。目前,采用“多傳感器融合”方案實現自動駕駛的企業主要有小鵬、蔚來、極狐等。

兩大派系在技術實現上,都是基于硬件來幫助汽車構架自身周圍的3D信息,然后讓計算芯片提取關鍵信息來做出駕駛決定。未來,“純視覺”要解決的是光致盲和認知錯誤等問題,“多傳感器融合”本身的融合就是一大技術挑戰,且算法本身還得優化,也需要更低成本的激光雷達產品。目前來看,兩大技術路線都還有很多潛能值得挖掘。

當然,高級別自動駕駛尚未打開家用這個大市場,路線之爭不僅是環境感知層面,還有單車智能和路車協同之間的爭議。但正如上文所述,元器件廠商對于自動駕駛的支持都選擇了高靈活性和性能冗余等方式,給每一種實現方案都提供盡可能的支持。下面我們就著重為大家介紹幾款貿澤電子網站上在售的可應用于自動駕駛的元器件產品,幫助大家完成各種不同的自動駕駛實現方案。

為下一代ADAS助力的FPGA

無論是傾向于怎樣的技術流派,對于實現自動駕駛而言,攝像頭都是必要的,它們充當著汽車的“眼睛”。那么,我們第一款要推薦的方案就是可應用于下一代ADAS開發的FPGA評估套件——UltraScale+MPSoC ZCU102開發工具,它在視覺處理上非常出色,來自制造商AMD Xilinx,貿澤電子網站上的制造商編號為EK-U1-ZCU102-G-J。

b65b2a26-07c0-11ed-ba43-dac502259ad0.png

圖2:MPSoC ZCU102評估套件

(圖源:AMD Xilinx)

MPSoC ZCU102開發工具采用Zynq UltraScale+ MPSoC器件,作為系統核心,該器件在核心配置、工藝架構、器件尺寸、系統功耗、軟件支持和圖形處理等方面具有行業領先的產品特性。

b68fc7a4-07c0-11ed-ba43-dac502259ad0.jpg

圖3:Zynq UltraScale+ MPSoC器件系統框圖

(圖源:AMD Xilinx)

通過上方的系統框圖能夠看到,Zynq UltraScale+ MPSoC器件基于四核ARMCortex-A53和雙核Cortex-R5實時處理器打造,并搭配靈活應變的內存層級。異構處理的產品設計加上器件本身的可編程特性,在提供更好性能的同時,允許工程師朋友多角度優化自己的應用。

16nm FinFET配合超小型化封裝讓Zynq UltraScale+ MPSoC器件擁有無與倫比的計算密度,不受應用條件限制,并提供更好的信號完整性。

支持AI/ML的深度學習處理單元以及Mali-400 MP2圖形處理單元的存在,讓Zynq UltraScale+ MPSoC器件可以勝任下一代ADAS系統對于視覺系統和相關算法的高要求,H.264/H.265視頻編解碼器則進一步提升了這方面的性能。同時,豐富的外設接口讓Zynq UltraScale+ MPSoC器件對支持“多傳感器融合”也是毫無壓力。

可以說,異構、高性能、超小型、高算力的Zynq UltraScale+ MPSoC器件是一顆用于打造下一代ADAS應用的理想器件,該器件所提供的64位處理器可擴展性更是為方案設計帶來了無限可能。想要體現該器件非凡的魅力,MPSoC ZCU102評估套件無疑提供了出色的平臺。

b6b3ffd4-07c0-11ed-ba43-dac502259ad0.png

圖4:MPSoC ZCU102評估套件系統框圖

(圖源:AMD Xilinx)

MPSoC ZCU102評估套件針對采用Zynq Ultrascale+ MPSoC的應用原型設計進行了優化,包括下一代ADAS。如上圖所示,該評估套件支持Zynq Ultrascale+ MPSoC的全部主要外設和接口,比如PCIe根端口Gen2x4、USB3、顯示端口和SATA等,支持各種方案的設計實現。

可用于ADAS原型設計的FPGA

在自動駕駛推進的過程中,我們看到,目前基本是廠商在主導技術路線之爭。而更進一步來講,即便是相同的路線下,由于廠商對于各個ECU功能單元的界定不同,系統架構和核心芯片的功能也會有差異。從元器件角度分析,由于每個公司對自動駕駛的理解不同,產品設計理念也有很大差異。那么,如何才能高效找到更有市場競爭力的設計方案呢?接下來這款產品能夠幫到你。

下面我們為大家介紹的是來自制造商AMD Xilinx的另一款解決方案——VersalAI Core系列VCK190評估套件,貿澤電子上,該產品的制造商編號為EK-VCK190-G-ED。

b6ebdf4e-07c0-11ed-ba43-dac502259ad0.png

圖5:Versal AI Core系列VCK190評估套件

(圖源:AMD Xilinx)

根據Xilinx Wiki的介紹,VCK190評估套件是第一個 VersalAI Core系列評估套件,可幫助設計者使用AI和DSP引擎開發解決方案。相較于服務器級CPU,這款評估套件的系統核心VC1902器件能夠提供超過100倍的計算力。

VCK190評估套件是一個“多面手”,工程師朋友既可以借助其廣泛的連接選項進行快速應用開發,包括數據中心計算、5G無線電與波束成形(DFE)、無線測試設備等。同時,也可以應用于ADAS的原型開發。

針對ADAS的原型開發,AMD Xilinx提供專門的目標參考設計,幫助實現汽車應用的多傳感器視頻分析。在參考設計中,VCK190評估板上的圖像傳感器模塊能夠實時接收信息傳遞并加速和攝像頭掛鉤的圖像傳感器信息,同時該評估板還支持其他汽車應用中常見的AI/ML工作負載。

S32G2處理器幫助打造下一代網關

如上文所述,環境感知與精準定位、路徑規劃、線控執行并稱自動駕駛四大核心技術。在具體實現時,“純視覺”是多組ECU對應多組攝像頭,提取有用信息之后匯總到計算芯片上做決策;“多傳感器融合”則是不同的傳感器對應不同的ECU模塊單元,最終依然需要將提取之后的信息發送到計算芯片上進行運算。在車輛外部,車聯網的概念讓部分信息需要上傳到云端,實現汽車作為邊端的邊云通信。那么,在此過程中,網關配置就顯得尤為重要,用來幫助提高實時性處理和安全性。

接下來,我們要重點介紹的這款元器件便是可用于實現下一代汽車網關和架構的S32G2汽車網絡微處理器,來自制造商NXP Semiconductors,大家可以通過搜索制造商編號S32G274AABK0VUCT在貿澤電子網站上精準找到它。

S32G2微處理器是NXP在汽車網關設備系列中的升級產品,基于四核ArmCortex-A53應用處理器打造,性能和網絡加速能力是該公司此前產品的10倍以上。能夠實現如此大的性能跨越,得益于該器件先進的設計理念。S32G2處理器帶可選的兩兩鎖步功能,用于處理高算力的應用和服務,其中3個Arm Cortex-M7全鎖步內核,用于處理實時應用。以太網數據包轉發引擎(PFE)、低延遲通信引擎(LLCE)以及硬件安全引擎(HSE)三大硬件加速器的存在,讓汽車網絡傳輸更快、更安全。

b7341d36-07c0-11ed-ba43-dac502259ad0.jpg

圖6:S32G2汽車網絡微處理器系統框圖

(圖源:NXP)

安全是S32G2處理器的一大產品特色,除了所提到的硬件加速器,還提供支持實現ASIL D功能安全的片上硬件模塊和軟件庫。在可選的高級軟件方案中,還提供可用于功能安全實現的S32安全軟件框架和用于Cortex-A53內核的結構內核自測(SCST),帶來更高級的信息安全和功能安全體驗。

總體而言,在域控制器、汽車網絡和安全處理器等方面,多功能的S32G2處理器都是絕佳選擇。

滿足多種汽車應用的圖像傳感器

在技術路線的解讀中我們看到,無論走怎樣的發展路線,攝像頭都是自動駕駛系統中必須要有的一部分,統稱為視覺系統。接下來,我們為大家介紹的這款器件是可用于ADAS、自動駕駛、環視、倒車攝像頭、車艙內監測等諸多汽車應用的圖像傳感器,來自制造商安森美(onsemi),貿澤電子上的制造商編號為ASX340AT2C00XPED0-DPBR2。

ASX340AT圖像傳感器是安森美圖像傳感器解決方案中的一個系列,主要面向汽車應用市場,適用于后視攝像頭、盲點監控和環視等應用。

ASX340AT系列是VGA格式的單芯片CMOS有源像素數字圖像傳感器,具有優質圖像傳感器的內在優點,比如低噪聲、低功耗和集成優勢等,提供了多種攝像頭功能,包括自動聚焦、自動白平衡和自動曝光。值得注意的是,ASX340AT系列是一款完整的片上攝像系統,在片上集成了復雜的攝像頭功能,讓集成商能夠在無需額外處理芯片的情況下設計后視攝像頭系統。

b762a958-07c0-11ed-ba43-dac502259ad0.png

圖7:ASX340AT系列內部框圖

(圖源:安森美

除了ASX340AT系列,整個安森美圖像傳感器解決方案是全面的圖像檢測產品組合,支持VGA至超過50MP的分辨率以及CMOS和CCD技術,可覆蓋汽車、工業、消費領域的各種應用。目前,該組合中新款5個系列圖像傳感器都在貿澤電子分銷,幫助工程師朋友實現前沿應用創新。

路線之爭持續,但目標只有一個

無疑,在未來很長的一段時間內,關于如何實現自動駕駛,依然會存在派系之爭,無論是環境感知,還是整體方案的實現。不過,純視覺方案在未來將逐漸丟失先發優勢,且由于方案的局限性較為明顯,預計會有越來越多的廠商擁抱“多傳感器融合”方案,尤其是在更高階的自動駕駛領域。當然,無論如何實現,最終目標只有一個——讓汽車駕駛更安全。為實現這個目標,廠商需要用更好的硬件方案去適配更智能的軟件算法,而這正是貿澤電子能夠幫到廣大工程師朋友的地方,通過海量的原廠授權器件,讓大家高效、優質地實現自動駕駛或輔助駕駛的硬件部分。

審核編輯 :李倩

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 傳感器
    +關注

    關注

    2552

    文章

    51286

    瀏覽量

    755099
  • 人工智能
    +關注

    關注

    1792

    文章

    47492

    瀏覽量

    239175
  • 自動駕駛
    +關注

    關注

    784

    文章

    13895

    瀏覽量

    166688

原文標題:自動駕駛路線之爭:純視覺方案vs多傳感器融合方案

文章出處:【微信號:貿澤電子,微信公眾號:貿澤電子】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    從2D走向3D的視覺傳感器

    電子發燒友網報道(文/黃山明)作為機器視覺系統的主要信息源,視覺傳感器一直在眾多視覺設備中占據重要位置。尤其是通過視覺
    的頭像 發表于 12-27 00:22 ?2021次閱讀

    傳感器融合在自動駕駛中的應用趨勢探究

    自動駕駛技術的快速發展加速交通行業變革,為實現車輛自動駕駛,需要車輛對復雜動態環境做出準確、高效的響應,而傳感器融合技術為提升自動駕駛系統的穩定性和安全性提供了關鍵支持。通過將不同種類的傳感
    的頭像 發表于 12-05 09:06 ?465次閱讀
    <b class='flag-5'>多</b><b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>在自動駕駛中的應用趨勢探究

    ZC1202速度傳感器溫度傳感器視覺傳感器加速度傳感器的作用

    速度傳感器、溫度傳感器視覺傳感器和加速度傳感器在各自的應用領域中發揮著不可替代的作用,為現代工業、汽車、醫療、安防等領域的發展提供了有力的
    的頭像 發表于 10-11 15:11 ?327次閱讀

    精密制造的革新:光譜共焦傳感器與工業視覺相機的融合

    在現代精密制造領域,對微小尺寸、高精度產品的檢測需求日益迫切。光譜共焦傳感器憑借其非接觸、高精度測量特性脫穎而出,而工業視覺相機則以其高分辨率、實時成像能力著稱。兩者的融合,不僅解決了傳統檢測方式在
    的頭像 發表于 09-26 11:47 ?376次閱讀

    VS高精度電壓傳感器

    ? ? ? ? VS系列電壓傳感器是一種量程覆蓋35kV及以下的直流、交流、周期性脈沖以及各種不規則波形的電壓傳感器,精度高達0.05%FS、帶寬高達100kHz,可滿足寬頻帶、高精度電壓測試需求
    的頭像 發表于 09-19 15:55 ?412次閱讀
    <b class='flag-5'>VS</b>高精度電壓<b class='flag-5'>傳感器</b>

    計算機視覺中的圖像融合

    模態融合則是將來自不同傳感器的圖像結合起來,也稱為傳感器融合。其主要應用包括醫學影像、監控
    的頭像 發表于 08-01 08:28 ?729次閱讀
    計算機<b class='flag-5'>視覺</b>中的圖像<b class='flag-5'>融合</b>

    機器視覺系統如何選擇圖像傳感器

    圖像傳感器是所有機器視覺(MV)系統的核心,這是負責將物理世界的信息轉換為數字數據的基本元件,在確保機器視覺操作的準確性、可靠性和高效率方面起到了關鍵作用。在這篇博文中,安森美探討了為機器視覺
    的頭像 發表于 07-05 10:49 ?604次閱讀

    解讀工業機器人避障常用的視覺傳感器、激光傳感器、紅外傳感器、超聲波傳感器

    ? 移動機器人需要通過傳感器實時獲取周圍的障礙物信息,包括尺寸、形狀和位置信息,來實現避障。避障使用的傳感器有很多種,目前常見的有視覺傳感器、激光
    的頭像 發表于 06-19 17:06 ?1894次閱讀
    解讀工業機器人避障常用的<b class='flag-5'>視覺</b><b class='flag-5'>傳感器</b>、激光<b class='flag-5'>傳感器</b>、紅外<b class='flag-5'>傳感器</b>、超聲波<b class='flag-5'>傳感器</b>

    銀河電氣VS系列電壓傳感器介紹

    VS系列電壓傳感器是一種量程覆蓋10kV及以下的直流、交流、周期性脈沖以及各種不規則波形的電壓傳感器,精度高達0.05%FS、帶寬高達200kHz,可滿足寬頻帶、高精度電壓測試需求。 銀河電氣
    的頭像 發表于 05-09 13:25 ?481次閱讀
    銀河電氣<b class='flag-5'>VS</b>系列電壓<b class='flag-5'>傳感器</b>介紹

    傳感器融合如何使 AMR 在工廠車間內高效移動

    依賴單一傳感器技術。 傳感器融合,或簡稱“傳感器融合”,將激光測距 (LIDAR)、攝像頭、超
    的頭像 發表于 05-05 09:34 ?883次閱讀
    <b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>如何使 AMR 在工廠車間內高效移動

    未來已來,傳感器融合感知是自動駕駛破局的關鍵

    駕駛的關鍵的是具備人類的感知能力,傳感器融合感知正是自動駕駛破局的關鍵。昱感微的雷視一體傳感器融合
    發表于 04-11 10:26

    智慧燈桿合一傳感器(創新設計,實現多功能融合

      智慧燈桿合一傳感器的最大特點就是創新的設計,將多種功能集成在一個燈桿上。它不僅僅能夠提供照明服務,還能夠實時監測空氣質量、溫度、濕度等環境數據,甚至能夠感知人流、車流等信息。這種多功能融合的設計,使得城市管理者可以更加方便
    的頭像 發表于 03-29 15:25 ?390次閱讀

    深度解析:傳感器融合SLAM技術全景剖析

    SLAM中,先驗值通常從一系列傳感器獲得,比如慣性測量單元(IMU)和編碼,而觀測值則是通過GPS、相機和激光雷達等其他傳感器獲取的,后驗值是融合了先驗信息與觀測數據之后得到的結果,
    發表于 02-23 11:31 ?3282次閱讀
    深度解析:<b class='flag-5'>多</b><b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>SLAM技術全景剖析

    鏡頭傳感器圖像視頻處理應用

    鏡頭傳感器系統(MESS,Multi-CameraMulti-SensorSystems)在許多領域和場合都有廣泛的應用。這些系統能夠通過整合多個鏡頭和傳感器的數據,提供更全面、準
    的頭像 發表于 01-26 08:31 ?724次閱讀
    <b class='flag-5'>多</b>鏡頭<b class='flag-5'>多</b><b class='flag-5'>傳感器</b>圖像視頻處理<b class='flag-5'>器</b>應用

    康謀技術 | 自動駕駛傳感器數據融合方法

    近年來,深度學習技術在涉及高維非結構化數據領域展現出了最先進的性能,如計算機視覺、語音、自然語言處理等方面,并且開始涉及更大、更復雜的模態信息問題。 不同傳感器在進行同一實驗任務時,針對產生的同一
    的頭像 發表于 01-24 18:02 ?626次閱讀
    康謀技術 | 自動駕駛<b class='flag-5'>多</b><b class='flag-5'>傳感器</b>數據<b class='flag-5'>融合</b>方法
    主站蜘蛛池模板: 色女人网| 色国产精品| 亚洲区免费| 热久久国产| 极品美女洗澡后露粉嫩木耳视频| 日韩美女三级| 欧美爽爽网| 狠狠综合| 你懂的在线看| 毛片毛多| 日本久本草精品| 欧美zooz人禽交免费| 久青草免费视频| 成年女人毛片免费观看97| 午夜视频免费国产在线| 美女天天操| 欧美精品高清在线xxxx| 亚洲福利视频一区二区| 在线观看你懂得| 色欧美色图| 国内真实下药迷j在线观看| 美女拍拍拍免费视频观看| 狠狠色狠狠色综合日日不卡| 99se亚洲综合色区| 大量真实偷拍情侣视频野战| 午夜视频福利在线观看| 狠狠干视频网| 性做久久久久久免费观看| 2021天天操| 中文字幕一精品亚洲无线一区| 特黄特色的视频免费播放| 在线观看亚洲人成网站| 天天色天天摸| 色综合九九| 久久精品亚洲青青草原| 久青草视频免费视频播放线路1| 国产美女一区二区三区| 国产精品资源手机在线播放| 亚州怡红院| 天堂资源在线| 免费看黄色片网站|