Please select Into the mobile phone version | Continue to access the computer ver.

Livox 学术先锋 | 香港大学 MaRS 实验室 R3LIVE 实时鲁棒性紧...

[Copy Link]
Author: Livox Pioneer | Time: 2022-2-17 16:02:54 | Smart city|
1 3935

29

Threads

30

Posts

378

Credits

Administrator

Rank: 9Rank: 9Rank: 9

Credits
378
Posted on 2022-2-17 16:02:54| All floors |Read mode
R3LIVE 系统介绍

R3LIVE(A Robust, Real-time, RGB-colored, LiDAR-Inertial-Visual tightly-coupledstate Estimation and mapping package)系统是由香港大学 MaRS 团队张富教授、林家荣博士提出的新型 LiDAR-Inertial-Visual 传感器融合框架,已于近期开源。它利用Livox Avia 激光雷达、惯性和视觉传感器实现了鲁棒、更高精度的状态估计。

R3LIVE 包含两个子系统:激光雷达-惯性里程计 (下文简称LIO) 和视觉-惯性里程计 (下文简称VIO)。其中LIO (FAST-LIO) 利用 LiDAR和惯性传感器的测量数据构建全局地图几何结构(3D 点云位置);VIO 利用视觉-惯性传感器的数据来渲染地图纹理(3D 点云颜色),同时VIO 还通过最小化帧到地图的光度误差来直接、有效地融合视觉数据。

R3LIVE 硬件系统
在本项目中,作者林家荣博士使用 Livox Avia 激光雷达、工业相机和 RoboMaster Manifold 2C 搭建了一套手持式三维扫描系统;同时也加入了一套 RTK 系统进行了真值比对数据的采集。







R3LIVE 系统架构示意图


Livox Avia R3LIVE 系统中的应用
在R3LIVE 的实验中,作者使用了Livox Avia 作为深度传感器,在香港大学以及香港科技大学校园采集数据以验证其算法的鲁棒性以及精度。得益于Livox Avia提供了非重复扫描的三维点云信息,使其所重建的地图能获得更加稠密的点云地图,显著提升了地图特征匹配的鲁棒性。此外,作者还使用了Livox Avia 内置的IMU芯片,利用其同步输出的高频率(200Hz)的六自由度运动信息,有效改善紧耦合算法的定位精度。


R3LIVE 公开实验数据集
R3LIVE 的作者已经公布了9个他们采集的数据集(总),用户可以访问以下网址获得数据集下载链接,复现和评估 R3LIVE实验效果:


R3LIVE 项目小结
在这个工作中,作者创新性地提出了R3LIVE, 有效地解决了以下几个问题:
- 通过融合相机信息,有效解决了激光雷达在退化场景下无法正常定位的问题;
- 提出了一套高精度、高效率的彩色点云重建系统,实时重建周围环境的稠密彩色点云;
-  作者开源了整套基于Livox Avia激光雷达的软硬件解决方案,旨在于以极具性价比的方案推动相关行业领域的研究以及应用。


部分实验结果展示


R3LIVE 系统应用的可拓展性极强,它不仅可以作为实时机器人应用的 SLAM 系统,还可以为测绘等应用重建密集、精确RGB 彩色3D 地图 。此外,R3LIVE的开发者还提供了一系列用于重建和渲染多边形网格地图(mesh)的实用程序,使R3LIVE 重建的地图能更方便、高效地导入到各种如游戏,仿真模拟器等 3D应用程序中去,进一步提升了R3LIVE 的可拓展性。

Livox 欢迎更多高校实验室及研究团队与我们沟通联系,就Livox 激光雷达应用进行深入探讨。也期待我们以高性价比激光雷达方案一同推动相关领域的研究、应用及进展!




香港大学 MaRS 实验室

香港大学 Mechatronics and Robotic Systems(简称MaRS)实验室,是由张富教授带领的专注于机电系统及机器人应用的实验室,目前团队在航空机器人设计、规划与控制及SLAM 应用等多个方向上取得了丰硕成果。


MaRS代表研究成果:
- R3LIVE: A Robust, Real-time, RGB-colored,LiDAR-Inertial-Visual tightly-coupled state Estimation and mapping package
- R2LIVE: A Robust,Real-time, LiDAR-Inertial-Visual tightly-coupled state Estimator and mapping
- Fast-LIO: A computationally efficient and robust LiDAR-inertial odometry package.
- ikd-tree: A state-of-art dynamic KD-Tree for 3D kNN search.
- Loam-livox: A robust LiDAR Odometry and Mapping (LOAM) package for Livox-LiDAR
- livox_camera_calib: A robust, high accuracy extrinsic calibration tool between highresolution LiDAR (e.g. Livox) and camera in targetless environment.
- mlcc: A fast andaccurate Multiple LiDARs and Cameras extrinsic Calibration

This post contains more resources

You need to Login Before they can download or view these resources, Don’t have an account?Register

x
Reply

Use props Report

0

Threads

1

Posts

6

Credits

Kindergarten

Rank: 1

Credits
6
Posted on 2022-4-7 10:58:41| All floors
如果只有雷达、IMU,可以使用R3LIVE系统吗?
Reply

Use props Report

You need to log in before you can reply Login | Register

Credit Rules

Quick Reply Back to top