在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

「顧大局,識大體」,Nullmax BEV障礙物檢測的超級視野

Nullmax紐勱 ? 來源:Nullmax紐勱 ? 2023-05-18 14:43 ? 次閱讀

感知周圍環境是自動駕駛開展一切工作的前提,在相對靜止的各式場景中,不同類型的障礙物以多種多樣的運動方式參與到交通之中,于是形成了千變萬化的交通情形。

因此障礙物的檢測,一直都是自動駕駛感知的核心任務。系統需要通過傳感器數據,識別出周圍存在的障礙物并計算各自的位置、速度等信息,然后轉換為BEV視角的感知結果輸出給下游,用來規劃軌跡、避免碰撞。

所以在近年,一步到位的BEV障礙物檢測成為了自動駕駛的研究熱點。尤其在多相機感知系統中,BEV能夠有效融合不同視角的空間信息,為目標檢測與跟蹤、車道線檢測等任務帶來全方位提升。

作為自動駕駛量產應用的引領企業,Nullmax從2020年開始了BEV早期研發,并在去年率先幫助客戶落地了BEV障礙物檢測的量產應用,提升車輛的全方位感知能力。當前,這項感知功能正作為Nullmax BEV-AI整體技術架構的一部分,應用到更多量產項目之中。

障礙物檢測需要BEV

對于自動駕駛量產來說,由于傳統基于圖像視角的障礙物檢測算法所依賴的感知后處理和跨相機融合等方面存在的一些不足,障礙物檢測的效果不盡理想。

一方面,傳統算法普遍首先基于深度學習在圖像視角完成目標檢測,然后通過復雜的后處理將其轉換至三維BEV視角。這不僅讓整個流程變得復雜,消耗更多算力,而且對場景的應對能力也存在不足。

所以,直接在BEV視角下輸出三維目標檢測結果的算法受到了廣泛歡迎。比如Nullmax的BEV 3D目標檢測算法,通過輸入的2D圖像直接端到端輸出BEV視角的3D目標信息,不僅檢測性能進一步提高,而且由于不需要額外的后處理步驟,整個算法的開發和升級維護也變得更加高效簡潔。

369ab39c-f545-11ed-90ce-dac502259ad0.png

BEV 3D目標檢測輸出更精準的三維尺寸

另一方面,在傳統多相機感知系統中,因為通常是每個相機先單獨進行檢測,然后再融合各相機結果,所以系統的工作量較大。此外,跨相機融合的時候也可能出現問題。典型的例子,就是車輛從一個相機視野駛入另一個相機視野的過程中,可能被識別為兩個目標。

37077112-f545-11ed-90ce-dac502259ad0.png

BEV多相機的障礙物ReID效果更佳

但是在BEV視角下,隱式跨相機的融合就可以變得更加簡潔和高效。比如Nullmax采取的多相機聯合方案,所有相機的圖像輸入到一個神經網絡中,然后生成全局BEV視角的特征圖,并直接輸出統一的感知結果,從而減少了額外的跨相機障礙物ReID(重識別)步驟。

因此在高階智駕不斷上車的今天,BEV目標檢測已經被看作是車輛實現障礙物檢測的首選方法,BEV感知算法的研發和應用也成為了新的行業浪潮。

與眾不同的BEV 3D目標檢測

作為最早開始BEV系統性研發的自動駕駛公司之一,Nullmax積累了大量的BEV感知技術,包括靜態場景理解以及動態障礙物的檢測及預測,并且將技術向下游延伸,構建了平臺化的BEV-AI自動駕駛整體技術架構。

375442c6-f545-11ed-90ce-dac502259ad0.png

BEV 3D障礙物檢測算法正是這套架構的核心組成,其不僅具備非常出色的性能表現,而且在落地方面也尤為高效。

Nullmax BEV障礙物檢測相比于常規的障礙物檢測,最大的特點是「顧大局,識大體」。常規檢測方式由于各相機單獨工作的原因,對視野截斷車輛、大型障礙物目標的檢測效果欠佳。但是Nullmax的檢測是在BEV視角下進行統一的計算,跨視野的目標不會被識別成多個目標,占滿單個相機視野的大型障礙物也能在范圍更大的全局視野中得到更好觀測。

并且由于BEV在空間、時序信息融合方面更具優勢,Nullmax的BEV障礙物檢測方案可以將3D目標檢測升維成4D目標檢測,實現更穩定的檢測、跟蹤與預測。這種時序信息帶來的短時記憶力,能讓障礙物檢測具備更強的處理遮擋能力。

相比于其他的BEV障礙物檢測方案,Nullmax方案還具有可進行超遠距離感知的特點。由于算法設計和車載平臺算力有限等方面的原因,常規BEV方案有效感知的距離通常為數十米遠,但是Nullmax的BEV方案可高效突破100米,甚至可有效檢測200米遠的障礙物目標,在各種量產配置下都能達到頂尖的性能指標。

同時,因為車載平臺部署的需要,Nullmax的BEV障礙物檢測算法可以支持高、中、低不同算力的平臺。從數百T算力到2T算力,Nullmax的BEV目標檢測算法都能靈活部署,既可以實現最極致的任務性能,也能在有限計算資源下提供最均衡的結果輸出。比如,基于8T算力和4顆側視相機的BEV 3D障礙物檢測應用。

除此之外,Nullmax的BEV目標檢測算法還能支持任意的傳感器配置,對相機的數量、安裝位置、內部參數等情況自動適配。換言之,無論是前視、側視、后視、環視組成的多相機系統,還是單個相機,這套算法能夠快速地部署。

目前,Nullmax的BEV 3D障礙物檢測算法已經在量產車型實現了大規模的上路應用,而且今年還將完成更多項目的交付,為更多量產車型帶來開掛一般的全局視野感知能力。

結語

BEV的「俯瞰全場」屬性,可以為自動駕駛障礙物檢測帶來質的提升,Nullmax將繼續通過領先的BEV障礙物檢測算法,幫助車輛實現復雜環境下的精準感知,并基于平臺化的BEV-AI技術架構,為客戶的量產應用帶來更大價值。

審核編輯 :李倩

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 算法
    +關注

    關注

    23

    文章

    4619

    瀏覽量

    93038
  • 目標檢測
    +關注

    關注

    0

    文章

    209

    瀏覽量

    15631
  • 深度學習
    +關注

    關注

    73

    文章

    5507

    瀏覽量

    121265
  • LLM
    LLM
    +關注

    關注

    0

    文章

    292

    瀏覽量

    351

原文標題:「顧大局,識大體」,Nullmax BEV障礙物檢測的超級視野 | Nullmax進化學

文章出處:【微信號:Nullmax,微信公眾號:Nullmax紐勱】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    遇到障礙物自動返回?

    為什么有些東西,遇到障礙物會自動返回,是哪一種傳感器嗎?哪里有沒有這類的電路圖介紹下,非常感謝
    發表于 09-10 21:14

    求教 障礙物感應類開關

    本帖最后由 gk320830 于 2015-3-8 14:20 編輯 急需用到2米內障礙物感應器,帶開關功能或者高手幫忙設計個輔助開關電路,24V電源供電,多謝
    發表于 03-07 21:58

    紅外障礙檢測問題

    我現在需要使用紅外檢測一個比較小的障礙物,直徑兩厘米,黑色,金屬。很多紅外檢測模塊的賣家都不確定可以檢測的到,我現在有一個想法,不知道可不可行。我想
    發表于 04-03 11:28

    基于單片機的道路障礙物系統,新人求教

    我想要做一個道路障礙物檢測系統。就是在路面上安一個檢測器,一旦有障礙物擋住,且在路上停留一段時間,就發射信號報警,使二極管發光。現在我想請教一下是不是
    發表于 03-10 13:33

    障礙物時 語音提示 前方危險,請注意。

    障礙物時語音提示前方危險,請注意。語音模塊是isd1820單片機51 求幫忙
    發表于 02-24 21:43

    基于labview機器視覺的障礙物時別

    通過攝像頭對周圍環境信息的實時采集,如果當鏡頭前方出現障礙物時候,以一定的方式(聲音或振動之類的)反饋出來。主要考慮的是實現盲人室內導盲作用,不需要太過于考慮實際使用,只要能實現判定到障礙物,自動提醒就行啦。怎么判定前方出現障礙物
    發表于 03-14 07:58

    用labview設計超級馬里奧游戲時如何加障礙物

    用labview設計超級馬里奧游戲時如何加障礙物
    發表于 05-09 13:33

    請問Infrared Proximity Sensor如何檢測前方是否有障礙物

    Infrared Proximity Sensor如何檢測前方是否有障礙物
    發表于 11-06 07:57

    檢測障礙物有什么什么傳感器?

    檢測障礙物有什么什么傳感器,用紅外反射還是超聲波測距,或者還有其他傳感器?
    發表于 11-08 06:33

    匯編語言程序設計案例—動態顯示/障礙物檢測/障礙物方位檢測

    匯編語言程序設計案例1—動態顯示/障礙物檢測/障礙物方位檢測 10-1.  LED數碼管顯示原理10-2.  案例分析1(2位學號顯示)10-3.  案
    發表于 03-23 12:15 ?38次下載

    基于雙目視覺的移動機器人障礙物檢測研究

    一種基于圖像分割和立體視覺相結合的障礙物檢測方法。通過分割提取出了障礙物的大致形體并濾去地面上的冗余信息,這樣就把立體視覺避障中匹配區域縮小到有用的障礙物
    發表于 10-18 16:08 ?27次下載

    障礙物檢測實驗

    障礙物檢測實驗 一、實驗目的“旋風”小車在運動過程中要成功避開障礙物必須在一定距離外就探測到障礙物。在小車上探測障礙物
    發表于 03-23 10:47 ?2862次閱讀
    <b class='flag-5'>障礙物</b><b class='flag-5'>檢測</b>實驗

    障礙物方位檢測實驗

    障礙物方位檢測實驗 一、實驗目的小車在運動中要成功避開障礙物,除了要檢測是否有障礙物外,還需要判斷障礙
    發表于 03-23 10:48 ?2006次閱讀
    <b class='flag-5'>障礙物</b>方位<b class='flag-5'>檢測</b>實驗

    ESP8266 SOC智能硬件典型應用方案之紅外障礙物檢測

    ESP8266 SOC智能硬件典型應用方案-紅外障礙物檢測應用-布爾值上報
    發表于 10-08 10:11 ?0次下載

    使用IR模塊的障礙物檢測

    電子發燒友網站提供《使用IR模塊的障礙物檢測器.zip》資料免費下載
    發表于 11-14 11:31 ?0次下載
    使用IR模塊的<b class='flag-5'>障礙物</b><b class='flag-5'>檢測</b>器
    主站蜘蛛池模板: 在线亚洲综合| 色噜噜狠狠色综合久| 深夜福利欧美| 婷婷激情在线| 国产a三级三级三级| 亚洲综合色网| 四虎国产视频| 欧美色图亚洲| 花怜write. as| 99久久免费精品高清特色大片| 午夜影院在线观看免费| 深夜影院一级毛片| 国产爱v| 8x8x极品国产在线| 久久精品国产免费中文| 亚洲欧洲综合网| 日本资源在线| 国产综合色在线视频区色吧图片| 永久免费视频网站在线观看| 久久国产影视| 亚洲日本在线观看| 亚1州区2区3区4区产品乱码| 欧美色惰| av2014天堂网| 久久国产福利| 亚洲综合一区二区三区| 性free3d| 国模私拍福利一区二区| 天天综合网色| 黄色网 在线播放| 亚洲伊人久久大香线蕉结合| 欧美色视频在线| 亚洲三级色| 五月丁香啪啪| 亚洲综合第一区| 久久久夜色精品国产噜噜| 天天躁夜夜躁狠狠躁| 欧美ol丝袜高跟秘书在线观看| 一级做a爱 一区| 精品手机在线| 欧美午夜精品一区二区三区|