在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

激光SLAM和視覺SLAM各擅勝場,融合使用、取長補短潛力巨大

ml8z_IV_Technol ? 來源:YXQ ? 2019-05-24 09:45 ? 次閱讀

一般來講,SLAM系統(tǒng)通常都包含多種傳感器和多種功能模塊。而按照核心的功能模塊來區(qū)分,目前常見的機器人SLAM系統(tǒng)一般具有兩種形式:基于激光雷達的SLAM(激光SLAM)和基于視覺的SLAM(Visual SLAM或VSLAM)。

同時定位與地圖構(gòu)建(Simultaneous Localization And Mapping,簡稱SLAM),通常是指在機器人或者其他載體上,通過對各種傳感器數(shù)據(jù)進行采集和計算,生成對其自身位置姿態(tài)的定位和場景地圖信息的系統(tǒng)。SLAM技術(shù)對于機器人或其他智能體的行動和交互能力至為關(guān)鍵,因為它代表了這種能力的基礎(chǔ):知道自己在哪里,知道周圍環(huán)境如何,進而知道下一步該如何自主行動。它在自動駕駛、服務(wù)型機器人、無人機、AR/VR等領(lǐng)域有著廣泛的應(yīng)用,可以說凡是擁有一定行動能力的智能體都擁有某種形式的SLAM系統(tǒng)。

一般來講,SLAM系統(tǒng)通常都包含多種傳感器和多種功能模塊。而按照核心的功能模塊來區(qū)分,目前常見的機器人SLAM系統(tǒng)一般具有兩種形式:基于激光雷達的SLAM(激光SLAM)和基于視覺的SLAM(Visual SLAM或VSLAM)。

激光SLAM簡介

激光SLAM脫胎于早期的基于測距的定位方法(如超聲和紅外單點測距)。激光雷達(Light Detection And Ranging)的出現(xiàn)和普及使得測量更快更準(zhǔn),信息更豐富。激光雷達采集到的物體信息呈現(xiàn)出一系列分散的、具有準(zhǔn)確角度和距離信息的點,被稱為點云。通常,激光SLAM系統(tǒng)通過對不同時刻兩片點云的匹配與比對,計算激光雷達相對運動的距離和姿態(tài)的改變,也就完成了對機器人自身的定位。

激光雷達距離測量比較準(zhǔn)確,誤差模型簡單,在強光直射以外的環(huán)境中運行穩(wěn)定,點云的處理也比較容易。同時,點云信息本身包含直接的幾何關(guān)系,使得機器人的路徑規(guī)劃和導(dǎo)航變得直觀。激光SLAM理論研究也相對成熟,落地產(chǎn)品更豐富。

圖1,激光SLAM的地圖構(gòu)建(谷歌Cartographer[1])

VSLAM簡介

眼睛是人類獲取外界信息的主要來源。視覺SLAM也具有類似特點,它可以從環(huán)境中獲取海量的、富于冗余的紋理信息,擁有超強的場景辨識能力。早期的視覺SLAM基于濾波理論,其非線性的誤差模型和巨大的計算量成為了它實用落地的障礙。近年來,隨著具有稀疏性的非線性優(yōu)化理論(Bundle Adjustment)以及相機技術(shù)、計算性能的進步,實時運行的視覺SLAM已經(jīng)不再是夢想。

通常,一個VSLAM系統(tǒng)由前端和后端組成(圖2)。前端負(fù)責(zé)通過視覺增量式計算機器人的位姿,速度較快。后端,主要負(fù)責(zé)兩個功能:

一是在出現(xiàn)回環(huán)(即判定機器人回到了之前訪問過的地點附近)時,發(fā)現(xiàn)回環(huán)并修正兩次訪問中間各處的位置與姿態(tài);

二是當(dāng)前端跟蹤丟失時,根據(jù)視覺的紋理信息對機器人進行重新定位。簡單說,前端負(fù)責(zé)快速定位,后端負(fù)責(zé)較慢的地圖維護。

VSLAM的優(yōu)點是它所利用的豐富紋理信息。例如兩塊尺寸相同內(nèi)容卻不同的廣告牌,基于點云的激光SLAM算法無法區(qū)別他們,而視覺則可以輕易分辨。這帶來了重定位、場景分類上無可比擬的巨大優(yōu)勢。同時,視覺信息可以較為容易的被用來跟蹤和預(yù)測場景中的動態(tài)目標(biāo),如行人、車輛等,對于在復(fù)雜動態(tài)場景中的應(yīng)用這是至關(guān)重要的。第三,視覺的投影模型理論上可以讓無限遠(yuǎn)處的物體都進入視覺畫面中,在合理的配置下(如長基線的雙目相機)可以進行很大尺度場景的定位與地圖構(gòu)建。

圖2,視覺SLAM的前端定位與后端地圖維護(ORB-SLAM2[2])

接下來我們將在細(xì)分項目上比較激光SLAM和VSLAM。

應(yīng)用場景

在應(yīng)用場景上,激光SLAM依據(jù)所使用的激光雷達的檔次基本被分為涇渭分明的室內(nèi)應(yīng)用和室外應(yīng)用,而VSLAM在室內(nèi)外都有豐富的應(yīng)用環(huán)境。VSLAM的主要挑戰(zhàn)是光照變化,例如在室外正午和夜間的跨時間定位與地圖構(gòu)建,其工作穩(wěn)定性不如高端室外多線激光雷達。近年來,光照模型修正和基于深度學(xué)習(xí)的高魯棒性特征點被廣泛應(yīng)用于視覺SLAM的研究中,體現(xiàn)出良好的效果,應(yīng)當(dāng)說VSLAM隨著這些技術(shù)的進步將會在光照變化的環(huán)境中擁有更穩(wěn)定的表現(xiàn)。

影響穩(wěn)定工作的因素

激光SLAM不擅長動態(tài)環(huán)境中的定位,比如有大量人員遮擋其測量的環(huán)境,也不擅長在類似的幾何環(huán)境中工作,比如在一個又長又直、兩側(cè)是墻壁的環(huán)境。由于重定位能力較差,激光SLAM在追蹤丟失后很難重新回到工作狀態(tài)。而視覺SLAM在無紋理環(huán)境(比如面對整潔的白墻面),以及光照特別弱的環(huán)境中,表現(xiàn)較差。

定位和地圖構(gòu)建精度

在靜態(tài)且簡單的環(huán)境中,激光SLAM定位總體來講優(yōu)于視覺SLAM;但在較大尺度且動態(tài)的環(huán)境中,視覺SLAM因為其具有的紋理信息,表現(xiàn)出更好的效果。在地圖構(gòu)建上,激光SLAM的特點是單點和單次測量都更精確,但地圖信息量更小;視覺SLAM特別是通過三角測距計算距離的方法,在單點和單次測量精度上表現(xiàn)總體來講不如激光雷達,但可以通過重復(fù)觀測反復(fù)提高精度,同時擁有更豐富的地圖信息。

累計誤差問題

激光SLAM總體來講較為缺乏回環(huán)檢測的能力,累計誤差的消除較為困難。而視覺SLAM使用了大量冗余的紋理信息,回環(huán)檢測較為容易,即使在前端累計一定誤差的情況下仍能通過回環(huán)修正將誤差消除。

傳感器成本

激光雷達事實上有許多檔次,成本都高于視覺傳感器。最昂貴如Velodyne的室外遠(yuǎn)距離多線雷達動輒數(shù)十萬元人民幣,而室外使用的高端中遠(yuǎn)距離平面雷達如SICK和Hokuyo大約在數(shù)萬元人民幣的等級。室內(nèi)應(yīng)用較廣的中低端近距離平面激光雷達也需要千元級—,其價格相當(dāng)于比較高端的工業(yè)級攝像頭和感光芯片。激光雷達量產(chǎn)后成本可能會大幅下降,但能否降到同檔次攝像頭的水平仍有一個大大的問號。

傳感器安裝和穩(wěn)定性

目前常見的激光雷達都是旋轉(zhuǎn)掃描式的,內(nèi)部長期處于旋轉(zhuǎn)中的機械結(jié)構(gòu)會給系統(tǒng)帶來不穩(wěn)定性,在顛簸震動時影響尤其明顯。而攝像頭不包含運動機械結(jié)構(gòu),對空間要求更低,可以在更多的場景下安裝使用(圖3)。不過,固態(tài)激光雷達的逐步成熟可能會為激光SLAM扳回這項劣勢。

圖3 激光雷達和視覺系統(tǒng)的安裝應(yīng)用。谷歌無人車上的多線激光雷達

DJI精靈4上的視覺系統(tǒng)

算法難度

激光SLAM由于其研究的成熟以及誤差模型的相對簡單,在算法上門檻更低,部分開源算法甚至已經(jīng)被納入了ROS系統(tǒng)成為了標(biāo)配。而反觀視覺SLAM,首先圖像處理本身就是一門很深的學(xué)問,而基于非線性優(yōu)化的地圖構(gòu)建上也是非常復(fù)雜和耗時的計算問題。現(xiàn)在已經(jīng)有許多優(yōu)秀的開源算法(如ORB-SLAM[2]、LSD-SLAM[3]),但在實際環(huán)境中優(yōu)化和改進現(xiàn)有的視覺SLAM框架,比如加入光照模型、使用深度學(xué)習(xí)提取的特征點、以及使用單雙目及多目融合視角等技術(shù),將是視覺SLAM進一步提升性能和實用性的必由之路。這些技術(shù)的算法門檻也遠(yuǎn)遠(yuǎn)高于激光SLAM。

計算需求

毫無疑問,激光SLAM的計算性能需求大大低于視覺SLAM。主流的激光SLAM可以在普通ARM CPU上實時運行,而視覺SLAM基本都需要較為強勁的準(zhǔn)桌面級CPU或者GPU支持。但業(yè)界也看到了這其中蘊藏的巨大機會,為視覺處理定制的ASICS市場已經(jīng)蠢蠢欲動。一個很好的例子是Intel旗下的Movidius,他們設(shè)計了一種特殊的架構(gòu)來進行圖像、視頻與深度神經(jīng)網(wǎng)絡(luò)的處理,在瓦級的超低功耗下達到桌面級GPU才擁有的吞吐量。DJI的精靈4系列產(chǎn)品就是使用這類專用芯片,實現(xiàn)了高速低功耗的視覺計算,為無人機避障和近地面場景導(dǎo)航提供根據(jù)。

多機協(xié)作

視覺主要是被動探測,不存在多機器人干擾問題。而激光雷達主動發(fā)射,在較多機器人時可能產(chǎn)生干擾。尤其是固態(tài)激光雷達的大量使用,可能使得場景中充滿了信號污染,從而影響激光SLAM的效果。

未來趨勢

激光SLAM和視覺SLAM各擅勝場,單獨使用都有其局限性,而融合使用則可能具有巨大的取長補短的潛力。例如,視覺在紋理豐富的動態(tài)環(huán)境中穩(wěn)定工作,并能為激光SLAM提供非常準(zhǔn)確的點云匹配,而激光雷達提供的精確方向和距離信息在正確匹配的點云上會發(fā)揮更大的威力(圖4)。而在光照嚴(yán)重不足或紋理缺失的環(huán)境中,激光SLAM的定位工作使得視覺可以借助不多的信息進行場景記錄。

圖4,KITTI數(shù)據(jù)集視覺里程計。ORB-SLAM[2],雙目視覺

V-LOAM[4],視覺引導(dǎo)激光修正

現(xiàn)實中的激光與視覺SLAM系統(tǒng)幾乎都會配備慣性元件、輪機里程計、衛(wèi)星定位系統(tǒng)、室內(nèi)基站定位系統(tǒng)等輔助定位工具,而近年來SLAM系統(tǒng)與其他傳感器的融合成為了一大熱點。不同于以往基于卡爾曼濾波的松耦合融合方法,現(xiàn)在學(xué)界的熱點是基于非線性優(yōu)化的緊耦合融合。例如與IMU的融合和實時相互標(biāo)定,使得激光或視覺模塊在機動 (猛烈加減速和旋轉(zhuǎn)) 時可以保持一定的定位精度,防止跟蹤丟失,極大的提高定位與地圖構(gòu)建的穩(wěn)定性。

激光點云信息本身也仍有潛力可挖。在高端的遠(yuǎn)距離多線激光雷達上,返回的點云除了包含方向和距離信息,還可以加入目標(biāo)點的反射率信息。當(dāng)線數(shù)較多較密時,由反射率信息構(gòu)成的數(shù)據(jù)可以視為一種紋理信息,因此可以在一定程度上享受視覺算法和紋理信息帶來的重定位等方面的優(yōu)勢。這些信息一旦融入到高精度地圖中,高精度地圖就可以在點云紋理兩種形式間無縫切換,使得利用高精度地圖的定位可以被只擁有廉價攝像頭的自動駕駛汽車分享。這也是目前國外一些團隊的研究方向([5])。

同時,視覺所依賴的投影模型,蘊含著非常豐富的“混搭”玩法。長、短基線的單雙目結(jié)合,可以在保證大尺度定位水平的同時提高中近距離的障礙探測和地圖構(gòu)建精度;廣角魚眼和360度全向攝像頭與標(biāo)準(zhǔn)單雙目的結(jié)合,使得VSLAM的覆蓋范圍可以進一步提升,特別適合對場景按照距離的遠(yuǎn)近進行不同精度不同速度的定位。被動視覺與深度相機的結(jié)合,催生了RGB-D SLAM,而深度相機量程的逐步擴大,將給這種特殊VSLAM帶來更大的應(yīng)用空間。

VSLAM的另一個也許更宏大的擴展在AI端。端到端的深度學(xué)習(xí)所帶來的圖像特征,已經(jīng)在識別和分類領(lǐng)域大大超越了人類手工選擇的SIFT/SURF/ORB等特征。我們可以很安全的說,未來在低紋理、低光照等環(huán)境下,深度學(xué)習(xí)所訓(xùn)練出的提取、匹配和定位估算等方法,也一定會超越目前VSLAM領(lǐng)域最先進的手工方法。更不用說,圖像本身所大量攜帶的信息,可以廣泛用于場景理解、場景分類、物體識別、行為預(yù)測等重要方面。一個很可能的情況是,未來視覺處理系統(tǒng)將直接包含定位、地圖構(gòu)建、運動規(guī)劃、場景理解以及交互等多個功能模塊,更緊密的聯(lián)合帶來更加智能的機器人行動能力。

如果想深入了解SLAM技術(shù)的過去、現(xiàn)在和未來趨勢,我們推薦文獻[6]。

結(jié)語

SLAM技術(shù)將賦予為機器人和智能體前所未有的行動能力。作為當(dāng)前SLAM框架的主要類型,激光SLAM與視覺SLAM必將在相互競爭和融合中發(fā)展,必將帶來機器人技術(shù)和人工智能技術(shù)的真正革命,也將使得機器人從實驗室和展示廳中走出來,真正服務(wù)和解放人類。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 激光
    +關(guān)注

    關(guān)注

    19

    文章

    3201

    瀏覽量

    64478
  • SLAM
    +關(guān)注

    關(guān)注

    23

    文章

    424

    瀏覽量

    31834

原文標(biāo)題:激光SLAM與視覺SLAM的現(xiàn)狀與趨勢

文章出處:【微信號:IV_Technology,微信公眾號:智車科技】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    利用VLM和MLLMs實現(xiàn)SLAM語義增強

    語義同步定位與建圖(SLAM)系統(tǒng)在對鄰近的語義相似物體進行建圖時面臨困境,特別是在復(fù)雜的室內(nèi)環(huán)境中。本文提出了一種面向?qū)ο?b class='flag-5'>SLAM的語義增強(SEO-SLAM)的新型SLAM系統(tǒng),借
    的頭像 發(fā)表于 12-05 10:00 ?162次閱讀
    利用VLM和MLLMs實現(xiàn)<b class='flag-5'>SLAM</b>語義增強

    最新圖優(yōu)化框架,全面提升SLAM定位精度

    的類別進行分類,如視覺SLAM激光SLAM、慣性SLAM等。 解決SLAM問題的經(jīng)典方法
    的頭像 發(fā)表于 11-12 11:26 ?365次閱讀
    最新圖優(yōu)化框架,全面提升<b class='flag-5'>SLAM</b>定位精度

    激光雷達在SLAM算法中的應(yīng)用綜述

    SLAM算法運行的重要傳感器。基于激光雷達的SLAM算法,對激光雷達SLAM總體框架進行介紹,詳細(xì)闡述前端里程計、后端優(yōu)化、回環(huán)檢測、地圖構(gòu)
    的頭像 發(fā)表于 11-12 10:30 ?585次閱讀
    <b class='flag-5'>激光</b>雷達在<b class='flag-5'>SLAM</b>算法中的應(yīng)用綜述

    MG-SLAM融合結(jié)構(gòu)化線特征優(yōu)化高斯SLAM算法

    同步定位與地圖構(gòu)建 (SLAM) 是計算機視覺中的一個基本問題,旨在在同時跟蹤相機姿勢的同時對環(huán)境進行地圖構(gòu)建。基于學(xué)習(xí)的密集 SLAM 方法,尤其是神經(jīng)輻射場 (NeRF) 方法,在捕獲密集光度
    的頭像 發(fā)表于 11-11 16:17 ?308次閱讀
    MG-<b class='flag-5'>SLAM</b>:<b class='flag-5'>融合</b>結(jié)構(gòu)化線特征優(yōu)化高斯<b class='flag-5'>SLAM</b>算法

    從算法角度看 SLAM(第 2 部分)

    作者: Aswin S Babu 正如我們在[第 1 部分]中所討論的,SLAM 是指在無地圖區(qū)域中估計機器人車輛的位置,同時逐步繪制該區(qū)域地圖的過程。根據(jù)使用的主要技術(shù),SLAM 算法可分為三種
    的頭像 發(fā)表于 10-02 16:39 ?326次閱讀
    從算法角度看 <b class='flag-5'>SLAM</b>(第 2 部分)

    一種適用于動態(tài)環(huán)境的實時視覺SLAM系統(tǒng)

    既能保證效率和精度,又無需GPU,行業(yè)第一個達到此目標(biāo)的視覺動態(tài)SLAM系統(tǒng)。
    的頭像 發(fā)表于 09-30 14:35 ?487次閱讀
    一種適用于動態(tài)環(huán)境的實時<b class='flag-5'>視覺</b><b class='flag-5'>SLAM</b>系統(tǒng)

    深度解析深度學(xué)習(xí)下的語義SLAM

    隨著深度學(xué)習(xí)技術(shù)的興起,計算機視覺的許多傳統(tǒng)領(lǐng)域都取得了突破性進展,例如目標(biāo)的檢測、識別和分類等領(lǐng)域。近年來,研究人員開始在視覺SLAM算法中引入深度學(xué)習(xí)技術(shù),使得深度學(xué)習(xí)SLAM系統(tǒng)
    發(fā)表于 04-23 17:18 ?1292次閱讀
    深度解析深度學(xué)習(xí)下的語義<b class='flag-5'>SLAM</b>

    工程實踐中VINS與ORB-SLAM的優(yōu)劣分析

    ORB-SLAM是一種基于特征的單目視覺SLAM系統(tǒng),廣泛用于實時三維地圖構(gòu)建和機器人定位。該系統(tǒng)使用ORB特征進行高效的視覺識別和地圖重建,支持關(guān)鍵幀技術(shù)和回環(huán)檢測來優(yōu)化地圖的準(zhǔn)確性
    的頭像 發(fā)表于 04-08 10:17 ?2853次閱讀
    工程實踐中VINS與ORB-<b class='flag-5'>SLAM</b>的優(yōu)劣分析

    什么是SLAMSLAM算法涉及的4要素

    SLAM技術(shù)可以應(yīng)用在無人駕駛汽車、無人機、機器人、虛擬現(xiàn)實等領(lǐng)域中,為這些領(lǐng)域的發(fā)展提供了支持。SLAM技術(shù)的發(fā)展已經(jīng)逐漸從單純的定位和地圖構(gòu)建轉(zhuǎn)向了基于場景理解的功能。
    發(fā)表于 04-04 11:50 ?2414次閱讀

    什么是SLAM?基于3D高斯輻射場的SLAM優(yōu)勢分析

    基于NeRF的SLAM算法采用全局地圖和圖像重建損失函數(shù),通過可微分渲染捕獲稠密的光度信息,具有高保真度。
    的頭像 發(fā)表于 04-01 12:44 ?735次閱讀

    基于濾波器的激光SLAM方案

    激光 SLAM 任務(wù)是搭載激光雷達的主體于運動中估計自身的位姿,同時建立周圍的環(huán)境地圖。而準(zhǔn)確的定位需要精確的地圖,精確的地圖則來自于準(zhǔn)確的定位,定位側(cè)重自身位姿估計,建圖側(cè)重外部環(huán)境重建。
    發(fā)表于 03-04 11:25 ?820次閱讀
    基于濾波器的<b class='flag-5'>激光</b><b class='flag-5'>SLAM</b>方案

    從基本原理到應(yīng)用的SLAM技術(shù)深度解析

    LSD-SLAM 即 Large-Scale Direct SLAM,兼容單目相機和雙目相機。LSD-SLAM是一種基于光流跟蹤的直接法SLAM,但是實現(xiàn)了半稠密建圖,建圖規(guī)模大,可以
    發(fā)表于 02-26 09:41 ?9260次閱讀
    從基本原理到應(yīng)用的<b class='flag-5'>SLAM</b>技術(shù)深度解析

    深度解析:多傳感器融合SLAM技術(shù)全景剖析

    SLAM中,先驗值通常從一系列傳感器獲得,比如慣性測量單元(IMU)和編碼器,而觀測值則是通過GPS、相機和激光雷達等其他傳感器獲取的,后驗值是融合了先驗信息與觀測數(shù)據(jù)之后得到的結(jié)果,它代表了根據(jù)所有已知信息計算出的最優(yōu)定位輸出
    發(fā)表于 02-23 11:31 ?3100次閱讀
    深度解析:多傳感器<b class='flag-5'>融合</b><b class='flag-5'>SLAM</b>技術(shù)全景剖析

    基于NeRF/Gaussian的全新SLAM算法

    基于NeRF的SLAM算法采用全局地圖和圖像重建損失函數(shù),通過可微分渲染捕獲稠密的光度信息,具有高保真度。
    的頭像 發(fā)表于 01-26 10:48 ?655次閱讀
    基于NeRF/Gaussian的全新<b class='flag-5'>SLAM</b>算法
    主站蜘蛛池模板: 欧美黄区| 亚洲精品视频专区| 免费亚洲视频在线观看| 免费午夜网站| 国产三片高清在线观看| 国产小视频在线看| h视频免费观看| 美女把尿口扒开让男人桶出水| 色尼玛亚洲综合| www亚洲一区| 天天狠天天透| 精品午夜久久福利大片免费| 91综合在线视频| 日本免费网站在线观看| 一级特黄特色的免费大片视频| 天堂在线中文| 午夜影视啪啪免费体验区深夜| 人人澡人人添| 美女一级a毛片免费观看| 国产经典一区| 看片福利| 免费观看一区二区| 久久综合九色综合98一99久久99久| www.国产一区二区三区| 九九福利| 婷婷五月五| 你懂的福利| 欧美8888| 九九九国产在线| 青草青视频在线观看| 成 人色 网 站999| ggg成人| 女人大毛片一级毛片一| 久久v| 四虎在线免费播放| 国产高清免费| 中文字幕一区二区三区 精品| 天堂资源bt种子在线| 午夜欧美精品| 97影院午夜午夜伦不卡| 免费看欧美一级特黄a大片一|