国产精品久久久aaaa,日日干夜夜操天天插,亚洲乱熟女香蕉一区二区三区少妇,99精品国产高清一区二区三区,国产成人精品一区二区色戒,久久久国产精品成人免费,亚洲精品毛片久久久久,99久久婷婷国产综合精品电影,国产一区二区三区任你鲁

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

激光SLAM和視覺SLAM各擅勝場,融合使用、取長補短潛力巨大

ml8z_IV_Technol ? 來源:YXQ ? 2019-05-24 09:45 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

一般來講,SLAM系統通常都包含多種傳感器和多種功能模塊。而按照核心的功能模塊來區分,目前常見的機器人SLAM系統一般具有兩種形式:基于激光雷達的SLAM(激光SLAM)和基于視覺的SLAM(Visual SLAM或VSLAM)。

同時定位與地圖構建(Simultaneous Localization And Mapping,簡稱SLAM),通常是指在機器人或者其他載體上,通過對各種傳感器數據進行采集和計算,生成對其自身位置姿態的定位和場景地圖信息的系統。SLAM技術對于機器人或其他智能體的行動和交互能力至為關鍵,因為它代表了這種能力的基礎:知道自己在哪里,知道周圍環境如何,進而知道下一步該如何自主行動。它在自動駕駛、服務型機器人、無人機、AR/VR等領域有著廣泛的應用,可以說凡是擁有一定行動能力的智能體都擁有某種形式的SLAM系統。

一般來講,SLAM系統通常都包含多種傳感器和多種功能模塊。而按照核心的功能模塊來區分,目前常見的機器人SLAM系統一般具有兩種形式:基于激光雷達的SLAM(激光SLAM)和基于視覺的SLAM(Visual SLAM或VSLAM)。

激光SLAM簡介

激光SLAM脫胎于早期的基于測距的定位方法(如超聲和紅外單點測距)。激光雷達(Light Detection And Ranging)的出現和普及使得測量更快更準,信息更豐富。激光雷達采集到的物體信息呈現出一系列分散的、具有準確角度和距離信息的點,被稱為點云。通常,激光SLAM系統通過對不同時刻兩片點云的匹配與比對,計算激光雷達相對運動的距離和姿態的改變,也就完成了對機器人自身的定位。

激光雷達距離測量比較準確,誤差模型簡單,在強光直射以外的環境中運行穩定,點云的處理也比較容易。同時,點云信息本身包含直接的幾何關系,使得機器人的路徑規劃和導航變得直觀。激光SLAM理論研究也相對成熟,落地產品更豐富。

圖1,激光SLAM的地圖構建(谷歌Cartographer[1])

VSLAM簡介

眼睛是人類獲取外界信息的主要來源。視覺SLAM也具有類似特點,它可以從環境中獲取海量的、富于冗余的紋理信息,擁有超強的場景辨識能力。早期的視覺SLAM基于濾波理論,其非線性的誤差模型和巨大的計算量成為了它實用落地的障礙。近年來,隨著具有稀疏性的非線性優化理論(Bundle Adjustment)以及相機技術、計算性能的進步,實時運行的視覺SLAM已經不再是夢想。

通常,一個VSLAM系統由前端和后端組成(圖2)。前端負責通過視覺增量式計算機器人的位姿,速度較快。后端,主要負責兩個功能:

一是在出現回環(即判定機器人回到了之前訪問過的地點附近)時,發現回環并修正兩次訪問中間各處的位置與姿態;

二是當前端跟蹤丟失時,根據視覺的紋理信息對機器人進行重新定位。簡單說,前端負責快速定位,后端負責較慢的地圖維護。

VSLAM的優點是它所利用的豐富紋理信息。例如兩塊尺寸相同內容卻不同的廣告牌,基于點云的激光SLAM算法無法區別他們,而視覺則可以輕易分辨。這帶來了重定位、場景分類上無可比擬的巨大優勢。同時,視覺信息可以較為容易的被用來跟蹤和預測場景中的動態目標,如行人、車輛等,對于在復雜動態場景中的應用這是至關重要的。第三,視覺的投影模型理論上可以讓無限遠處的物體都進入視覺畫面中,在合理的配置下(如長基線的雙目相機)可以進行很大尺度場景的定位與地圖構建。

圖2,視覺SLAM的前端定位與后端地圖維護(ORB-SLAM2[2])

接下來我們將在細分項目上比較激光SLAM和VSLAM。

應用場景

在應用場景上,激光SLAM依據所使用的激光雷達的檔次基本被分為涇渭分明的室內應用和室外應用,而VSLAM在室內外都有豐富的應用環境。VSLAM的主要挑戰是光照變化,例如在室外正午和夜間的跨時間定位與地圖構建,其工作穩定性不如高端室外多線激光雷達。近年來,光照模型修正和基于深度學習的高魯棒性特征點被廣泛應用于視覺SLAM的研究中,體現出良好的效果,應當說VSLAM隨著這些技術的進步將會在光照變化的環境中擁有更穩定的表現。

影響穩定工作的因素

激光SLAM不擅長動態環境中的定位,比如有大量人員遮擋其測量的環境,也不擅長在類似的幾何環境中工作,比如在一個又長又直、兩側是墻壁的環境。由于重定位能力較差,激光SLAM在追蹤丟失后很難重新回到工作狀態。而視覺SLAM在無紋理環境(比如面對整潔的白墻面),以及光照特別弱的環境中,表現較差。

定位和地圖構建精度

在靜態且簡單的環境中,激光SLAM定位總體來講優于視覺SLAM;但在較大尺度且動態的環境中,視覺SLAM因為其具有的紋理信息,表現出更好的效果。在地圖構建上,激光SLAM的特點是單點和單次測量都更精確,但地圖信息量更??;視覺SLAM特別是通過三角測距計算距離的方法,在單點和單次測量精度上表現總體來講不如激光雷達,但可以通過重復觀測反復提高精度,同時擁有更豐富的地圖信息。

累計誤差問題

激光SLAM總體來講較為缺乏回環檢測的能力,累計誤差的消除較為困難。而視覺SLAM使用了大量冗余的紋理信息,回環檢測較為容易,即使在前端累計一定誤差的情況下仍能通過回環修正將誤差消除。

傳感器成本

激光雷達事實上有許多檔次,成本都高于視覺傳感器。最昂貴如Velodyne的室外遠距離多線雷達動輒數十萬元人民幣,而室外使用的高端中遠距離平面雷達如SICK和Hokuyo大約在數萬元人民幣的等級。室內應用較廣的中低端近距離平面激光雷達也需要千元級—,其價格相當于比較高端的工業級攝像頭和感光芯片。激光雷達量產后成本可能會大幅下降,但能否降到同檔次攝像頭的水平仍有一個大大的問號。

傳感器安裝和穩定性

目前常見的激光雷達都是旋轉掃描式的,內部長期處于旋轉中的機械結構會給系統帶來不穩定性,在顛簸震動時影響尤其明顯。而攝像頭不包含運動機械結構,對空間要求更低,可以在更多的場景下安裝使用(圖3)。不過,固態激光雷達的逐步成熟可能會為激光SLAM扳回這項劣勢。

圖3 激光雷達和視覺系統的安裝應用。谷歌無人車上的多線激光雷達

DJI精靈4上的視覺系統

算法難度

激光SLAM由于其研究的成熟以及誤差模型的相對簡單,在算法上門檻更低,部分開源算法甚至已經被納入了ROS系統成為了標配。而反觀視覺SLAM,首先圖像處理本身就是一門很深的學問,而基于非線性優化的地圖構建上也是非常復雜和耗時的計算問題?,F在已經有許多優秀的開源算法(如ORB-SLAM[2]、LSD-SLAM[3]),但在實際環境中優化和改進現有的視覺SLAM框架,比如加入光照模型、使用深度學習提取的特征點、以及使用單雙目及多目融合視角等技術,將是視覺SLAM進一步提升性能和實用性的必由之路。這些技術的算法門檻也遠遠高于激光SLAM。

計算需求

毫無疑問,激光SLAM的計算性能需求大大低于視覺SLAM。主流的激光SLAM可以在普通ARM CPU上實時運行,而視覺SLAM基本都需要較為強勁的準桌面級CPU或者GPU支持。但業界也看到了這其中蘊藏的巨大機會,為視覺處理定制的ASICS市場已經蠢蠢欲動。一個很好的例子是Intel旗下的Movidius,他們設計了一種特殊的架構來進行圖像、視頻與深度神經網絡的處理,在瓦級的超低功耗下達到桌面級GPU才擁有的吞吐量。DJI的精靈4系列產品就是使用這類專用芯片,實現了高速低功耗的視覺計算,為無人機避障和近地面場景導航提供根據。

多機協作

視覺主要是被動探測,不存在多機器人干擾問題。而激光雷達主動發射,在較多機器人時可能產生干擾。尤其是固態激光雷達的大量使用,可能使得場景中充滿了信號污染,從而影響激光SLAM的效果。

未來趨勢

激光SLAM和視覺SLAM各擅勝場,單獨使用都有其局限性,而融合使用則可能具有巨大的取長補短的潛力。例如,視覺在紋理豐富的動態環境中穩定工作,并能為激光SLAM提供非常準確的點云匹配,而激光雷達提供的精確方向和距離信息在正確匹配的點云上會發揮更大的威力(圖4)。而在光照嚴重不足或紋理缺失的環境中,激光SLAM的定位工作使得視覺可以借助不多的信息進行場景記錄。

圖4,KITTI數據集視覺里程計。ORB-SLAM[2],雙目視覺

V-LOAM[4],視覺引導激光修正

現實中的激光與視覺SLAM系統幾乎都會配備慣性元件、輪機里程計、衛星定位系統、室內基站定位系統等輔助定位工具,而近年來SLAM系統與其他傳感器的融合成為了一大熱點。不同于以往基于卡爾曼濾波的松耦合融合方法,現在學界的熱點是基于非線性優化的緊耦合融合。例如與IMU的融合和實時相互標定,使得激光或視覺模塊在機動 (猛烈加減速和旋轉) 時可以保持一定的定位精度,防止跟蹤丟失,極大的提高定位與地圖構建的穩定性。

激光點云信息本身也仍有潛力可挖。在高端的遠距離多線激光雷達上,返回的點云除了包含方向和距離信息,還可以加入目標點的反射率信息。當線數較多較密時,由反射率信息構成的數據可以視為一種紋理信息,因此可以在一定程度上享受視覺算法和紋理信息帶來的重定位等方面的優勢。這些信息一旦融入到高精度地圖中,高精度地圖就可以在點云紋理兩種形式間無縫切換,使得利用高精度地圖的定位可以被只擁有廉價攝像頭的自動駕駛汽車分享。這也是目前國外一些團隊的研究方向([5])。

同時,視覺所依賴的投影模型,蘊含著非常豐富的“混搭”玩法。長、短基線的單雙目結合,可以在保證大尺度定位水平的同時提高中近距離的障礙探測和地圖構建精度;廣角魚眼和360度全向攝像頭與標準單雙目的結合,使得VSLAM的覆蓋范圍可以進一步提升,特別適合對場景按照距離的遠近進行不同精度不同速度的定位。被動視覺與深度相機的結合,催生了RGB-D SLAM,而深度相機量程的逐步擴大,將給這種特殊VSLAM帶來更大的應用空間。

VSLAM的另一個也許更宏大的擴展在AI端。端到端的深度學習所帶來的圖像特征,已經在識別和分類領域大大超越了人類手工選擇的SIFT/SURF/ORB等特征。我們可以很安全的說,未來在低紋理、低光照等環境下,深度學習所訓練出的提取、匹配和定位估算等方法,也一定會超越目前VSLAM領域最先進的手工方法。更不用說,圖像本身所大量攜帶的信息,可以廣泛用于場景理解、場景分類、物體識別、行為預測等重要方面。一個很可能的情況是,未來視覺處理系統將直接包含定位、地圖構建、運動規劃、場景理解以及交互等多個功能模塊,更緊密的聯合帶來更加智能的機器人行動能力。

如果想深入了解SLAM技術的過去、現在和未來趨勢,我們推薦文獻[6]。

結語

SLAM技術將賦予為機器人和智能體前所未有的行動能力。作為當前SLAM框架的主要類型,激光SLAM與視覺SLAM必將在相互競爭和融合中發展,必將帶來機器人技術和人工智能技術的真正革命,也將使得機器人從實驗室和展示廳中走出來,真正服務和解放人類。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 激光
    +關注

    關注

    21

    文章

    3657

    瀏覽量

    69623
  • SLAM
    +關注

    關注

    24

    文章

    457

    瀏覽量

    33324

原文標題:激光SLAM與視覺SLAM的現狀與趨勢

文章出處:【微信號:IV_Technology,微信公眾號:智車科技】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    SLAM如何為自動駕駛提供空間感知能力?

    ,并精準地判斷自己與障礙物的距離。這種看似本能的空間感知能力,在工程學領域被具象化為同步定位與地圖構建技術,即我們常說的SLAM。在自動駕駛的發展進程中,SLAM不僅是車輛在未知環境中“生存”的技能,更是其實現厘米級高
    的頭像 發表于 02-09 09:12 ?410次閱讀
    <b class='flag-5'>SLAM</b>如何為自動駕駛提供空間感知能力?

    什么是激光雷達 3D SLAM技術?

    在智能移動設備自主運行的賽道上,激光雷達3DSLAM技術正成為破局關鍵,但多數人對其認知仍停留在表層。要讀懂這一核心技術,不妨先回溯“SLAM”的本質——SLAM
    的頭像 發表于 12-02 19:23 ?583次閱讀
    什么是<b class='flag-5'>激光</b>雷達 3D <b class='flag-5'>SLAM</b>技術?

    華為Limera,激光+視覺融合的新嘗試

    電子發燒友網綜合報道 激光雷達和視覺融合的傳感器,近年來似乎成為了一個趨勢。這種融合的趨勢有幾種方向,一是將攝像頭和激光雷達集成在一個模塊中
    的頭像 發表于 11-21 08:50 ?5022次閱讀
    華為Limera,<b class='flag-5'>激光</b>+<b class='flag-5'>視覺</b><b class='flag-5'>融合</b>的新嘗試

    FPGA和GPU加速的視覺SLAM系統中特征檢測器研究

    特征檢測是SLAM系統中常見但耗時的模塊,隨著SLAM技術日益廣泛應用于無人機等功耗受限平臺,其效率優化尤為重要。本文首次針對視覺SLAM流程開展硬件加速特征檢測器的對比研究,通過對比
    的頭像 發表于 10-31 09:30 ?659次閱讀
    FPGA和GPU加速的<b class='flag-5'>視覺</b><b class='flag-5'>SLAM</b>系統中特征檢測器研究

    自動駕駛中如何將稀疏地圖與視覺SLAM相結合?

    [首發于智駕最前沿微信公眾號]在自動駕駛場景中,稀疏地圖通常是由一系列關鍵幀和若干三維稀疏特征點構成的地圖,每個特征點包含三維坐標和描述外觀的描述子;而視覺SLAM是運行在車輛上的實時算法,它一邊
    的頭像 發表于 10-28 09:07 ?683次閱讀
    自動駕駛中如何將稀疏地圖與<b class='flag-5'>視覺</b><b class='flag-5'>SLAM</b>相結合?

    全新輕量級ViSTA-SLAM系統介紹

    無需相機內參、極致輕量的前端(前端模型大小僅為同類35%),實時單目視覺SLAM,ViSTA-SLAM。與現有方法相比,ViSTA-SLAM不僅更輕、更快,在相機跟蹤和密集3D重建質量
    的頭像 發表于 09-22 15:53 ?917次閱讀
    全新輕量級ViSTA-<b class='flag-5'>SLAM</b>系統介紹

    一種適用于動態環境的自適應先驗場景-對象SLAM框架

    由于傳統視覺SLAM在動態場景中容易會出現嚴重的定位漂移,本文提出了一種新穎的基于場景-對象的可靠性評估框架,該框架通過當前幀質量指標以及相對于可靠參考幀的場景變化,全面評估SLAM的穩定性。
    的頭像 發表于 08-19 14:17 ?873次閱讀
    一種適用于動態環境的自適應先驗場景-對象<b class='flag-5'>SLAM</b>框架

    解析尋跡智行3D SLAM無人叉車的&quot;智慧&quot;從何而來?(本文純干貨)

    尋跡智行率先研發成功3D SLAM激光導航技術在無人叉車領域應用并實現規?;慨a,成功突破高精度環境感知與自主決策的技術瓶頸,重新定義倉儲物流的智能化標準。
    的頭像 發表于 07-22 11:53 ?540次閱讀
    解析尋跡智行3D <b class='flag-5'>SLAM</b>無人叉車的&quot;智慧&quot;從何而來?(本文純干貨)

    基于深度學習的增強版ORB-SLAM3詳解

    ORB-SLAM3雖是當前最先進的SLAM之一,但由于使用傳統的ORB(定向FAST和旋轉BRIEF)特征,在尺度、旋轉和光照發生顯著變化時可能會表現出局限性。
    的頭像 發表于 07-14 17:21 ?1698次閱讀
    基于深度學習的增強版ORB-<b class='flag-5'>SLAM</b>3詳解

    一種適用于動態環境的實時RGB-D SLAM系統

    近期用于視覺SLAM的3D高斯潑濺(3DGS)技術在跟蹤和高保真建圖方面取得了顯著進展。然而,其順序優化框架以及對動態物體的敏感性限制了其在現實場景中的實時性能和魯棒性。為此,我們提出
    的頭像 發表于 07-04 15:14 ?1288次閱讀
    一種適用于動態環境的實時RGB-D <b class='flag-5'>SLAM</b>系統

    三維高斯潑濺大規模視覺SLAM系統解析

    近期興起的神經輻射場(NeRF)與三維高斯潑濺(3DGS)技術在視覺SLAM中展現出令人鼓舞的突破性成果。然而,當前主流方法多依賴RGBD傳感器,并且僅適用于室內環境。在大規模室外場景中的重建魯棒性
    的頭像 發表于 05-27 14:13 ?1567次閱讀
    三維高斯潑濺大規模<b class='flag-5'>視覺</b><b class='flag-5'>SLAM</b>系統解析

    基于高斯的稠密視覺SLAM研究

    基于高斯的場景表示在新視角下會出現幾何失真,這大大降低了基于高斯的跟蹤方法的準確性。這些幾何不一致主要源于高斯基元的深度建模以及在深度融合過程中表面之間的相互干擾。為了解決這些問題,我們提出了一種
    的頭像 發表于 05-15 10:36 ?1076次閱讀
    基于高斯的稠密<b class='flag-5'>視覺</b><b class='flag-5'>SLAM</b>研究

    【「# ROS 2智能機器人開發實踐」閱讀體驗】視覺實現的基礎算法的應用

    的本質是解決“雞與蛋”問題:機器人需要地圖來定位,又需要準確定位來構建地圖。書中從前端(傳感器數據處理)和后端(位姿優化)兩個層面解析了SLAM的算法邏輯。 激光雷達和視覺SLAM各有
    發表于 05-03 19:41

    【「# ROS 2智能機器人開發實踐」閱讀體驗】+ROS2應用案例

    地圖構建,包括算法原理介紹、安裝與配置方法、仿真環境中的SLAM以及真實機器人上的SLAM。 這一過程不僅涉及到計算機視覺和機器人學的知識,還需要對ROS 2的節點管理和數據處理有一定的了解。通過實踐
    發表于 04-27 11:42

    一種基于點、線和消失點特征的單目SLAM系統設計

    本文提出了一種穩健的單目視覺SLAM系統,該系統同時利用點、線和消失點特征來進行精確的相機位姿估計和地圖構建,有效解決了傳統基于點特征的SLAM的局限性。
    的頭像 發表于 03-21 17:07 ?1050次閱讀
    一種基于點、線和消失點特征的單目<b class='flag-5'>SLAM</b>系統設計