LIDAR UPSMPLING对于机器人和自动驾驶汽车的启示系统来说是一项艰巨的任务,这是由于大型场景的稀疏结构稀疏和不规则的结构。最近的作品建议通过将LIDAR数据从3D欧几里得空间传播到2D图像空间中的一个超级分辨率问题来解决此问题。尽管他们的方法可以生成具有细粒细节的高分辨率范围图像,但由此产生的3D点云是10个模糊细节并预测无效的点。在此pa-per中,我们提出了郁金香,这是一种从低分辨率激光雷达输入中重建高分辨率激光圈云的新方法。我们还遵循一种基于图像的方法,但特定地修改了基于Swin-Transformer网络的贴片和窗口几何形状,以更好地拟合范围图像的特性。我们在三个公共现实世界和模拟数据集上进行了几项实验。郁金香在所有相关指标中都优于最先进的方法,并且比以前的工作生成了强大,更现实的点云。该代码可在https://github.com/ethz-asl/tulip.git上找到。
构建准确的地图是构成可靠的局部设备,计划和导航的关键构建块。我们提出了一种新的方法,可以利用LiDAR扫描来建立动态环境的准确地图。为此,我们建议将4D场景编码为新的时空隐式神经图表示,通过将时间依赖性的截断符号距离函数拟合到每个点。使用我们的代表,我们通过过滤动态零件来提取静态图。我们的神经表示基于稀疏特征网格,一种全球共享的解码器和时间依赖性的BAIS函数,我们以无监督的方式共同优化。要从一系列li-dar扫描中学习此表示,我们设计了一个简单而有效的损耗函数,以分段方式监督地图优化。我们在包含静态图的重建质量和动态点云的分割的各种场景上评估了我们的方法1。实验结果表明,我们的方法是删除输入点云的动态部分的过程,同时重建准确而完整的3D地图,以超出几种最新方法。
摘要 - 在具有挑战性的环境中需要可靠的定位,需要现代机器人系统才能运行。基于激光雷达的局部化方法,例如迭代最接近的点(ICP)算法,可能会在几何无知的环境中遭受损害,这些环境已知,这些环境已知会导致点云登记性能恶化,并沿弱受约束方向推动散落的优化。为了克服这个问题,这项工作提出了i)稳健的可局部性检测模块,ii)局限性感知到的受限的ICP优化模块,该模块将其与统一的局限性检测模块相结合。通过利用扫描和地图之间的对应关系来实现所提出的可区分性检测,以分析优化的主要方向的对齐强度,作为其细粒度的LIDAR固定性分析的一部分。在第二部分中,然后将此可本质性分析集成到扫描到映射点云注册中,以通过执行受控更新或离开优化的脱位方向来生成无漂移姿势更新。所提出的方法经过彻底评估并将其与模拟和现实世界实验1中的最新方法进行了比较,证明了激光挑战环境的性能和可靠性提高。在所有实验中,所提出的框架表明没有环境特异性参数调整的准确且可推广的可局部性检测和可靠的姿势估计。
计算机视觉技术在自动驾驶汽车的感知堆栈中起着核心作用。使用此类方法来感知给定数据的车辆周围环境。3D激光雷达传感器通常用于从场景中收集稀疏的3D点云。然而,根据人类的看法,这种系统努力鉴于那些稀疏的点云,因此很难塑造现场的看不见的部分。在此问题中,场景完成任务旨在预测LiDAR测量中的差距,以实现更完整的场景表示。鉴于最近扩散模型作为图像的生成模型的有希望的结果,我们建议将其扩展以实现单个3D LIDAR扫描的场景。以前的作品使用了从LiDAR数据提取的范围图像上使用扩散模型,直接应用了基于图像的扩散方法。差不多,我们建议直接在这些点上操作,并介绍尖锐的和降解的扩散过程,以便它可以在场景规模上有效地工作。与我们的方法一起,我们提出了正规化损失,以稳定在denoising过程中预测的噪声。我们的实验评估表明,我们的方法可以在单个LIDAR扫描中完成场景,作为输入,与最新场景完成方法相比,产生了更多详细信息的场景。我们认为,我们提出的扩散过程公式可以支持应用于场景尺度点云数据的扩散模型中的进一步研究。1
构建准确的地图是构成可靠的局部设备,计划和导航的关键构建块。我们提出了一种新的方法,可以利用LiDAR扫描来建立动态环境的准确地图。为此,我们建议将4D场景编码为新的时空隐式神经图表示,通过将时间依赖性的截断符号距离函数拟合到每个点。使用我们的代表,我们通过填充动态零件来提取静态图。我们的神经表示基于稀疏特征网格,一种全球共享的解码器和时间依赖性的BAIS函数,我们以无监督的方式共同优化。要从一系列li-dar扫描学习此表示形式,我们设计了一个简单而有效的损耗函数,以分段方式监督地图优化。我们在包含静态图的重建质量和动态点云的分割的各种场景上评估了我们的方法1。实验结果表明,我们的方法是删除输入点云的动态部分的过程,同时重建准确而完整的3D地图,以超出几种最新方法。
单光子光检测和范围(LIDAR)系统通常配备一系列检测器,以提高空间分辨率和传感速度。但是,考虑到激光跨场横跨场景产生的固定量磁通量,当更多像素在单位空间中堆积时,每像素信号到噪声(SNR)将减小。这在传感器阵列的空间分辨率与每个像素的SNR之间的空间分辨率之间提出了基本的权衡。探索了这种基本限制的理论表征。通过得出光子竞争统计量并引入一系列新的近似技术,得出了时间延迟的最大样品估计器的平均平方误差(MSE)。理论预测与模拟和实际数据良好。
摘要 - 准确的定位在自主机器人系统的有效运行中起着至关重要的作用,尤其是在诸如施工站点之类的染色体环境中。同时使用LIDAR传感器同时定位和映射(SLAM)已成为一种流行的解决方案,因为它在没有外部基础架构的情况下可以进行功能。但是,现有的al-gorithms表现出重大的缺点。尽管当前的方法在长期轨迹上达到了很高的准确性,但它们在复杂的室内环境中的精确性和可靠性而苦苦挣扎。本文介绍了一种新型的基于功能的LiDAR SLAM系统,旨在解决这些局限性并增强短期精度和整体鲁棒性。使用现有数据集和物理机器人平台评估了所提出的系统,以解决当前实现的局限性,并在挑战现实世界中,尤其是在施工环境中展示改进的穿孔。
尽管神经辐射场 (NeRF) 在图像新视图合成 (NVS) 方面取得了成功,但 LiDAR NVS 仍然基本上未被探索。以前的 LiDAR NVS 方法采用了与图像 NVS 方法的简单转变,同时忽略了 LiDAR 点云的动态特性和大规模重建问题。鉴于此,我们提出了 LiDAR4D,这是一个可微分的 LiDAR 专用框架,用于新颖的时空 LiDAR 视图合成。考虑到稀疏性和大规模特性,我们设计了一种结合多平面和网格特征的 4D 混合表示,以由粗到细的方式实现有效重建。此外,我们引入了从点云衍生的几何约束来提高时间一致性。对于 LiDAR 点云的真实合成,我们结合了光线丢弃概率的全局优化来保留跨区域模式。在 KITTI-360 和 NuScenes 数据集上进行的大量实验证明了我们的方法在实现几何感知和时间一致的动态重建方面具有优越性。代码可在 https://github.com/ispc-lab/LiDAR4D 获得。
摘要 - 在自动移动和机器人系统的感知框架内,对Lidars通常生成的3D点云的语义分析是许多应用程序的关键,例如对象检测和识别以及场景重建。场景语义分割可以通过将3D空间数据与专门的深神经网络直接整合在一起来实现。尽管这种类型的数据提供了有关周围环境的丰富几何信息,但它也提出了许多挑战:其非结构化和稀疏性质,不可预测的规模以及苛刻的计算要求。这些特征阻碍了实时半分析,尤其是在资源受限的硬件 - 构造方面,构成了许多机器人应用的主要计算组件。因此,在本文中,我们研究了各种3D语义分割方法,并分析了其对嵌入式NVIDIA JETSON平台的资源约束推断的性能和能力。我们通过标准化的培训方案和数据增强进行了公平的比较,为两个大型室外数据集提供了基准的结果:Semantickitti和Nuscenes。
摘要:光检测和范围(LIDAR)技术现在已成为许多应用程序中的主要工具,例如自主驾驶和人类 - 机器人协作。基于点云的3D对象检测因其在挑战性的环境中对相机的有效性而在行业和日常生活中广泛接受。在本文中,我们提出了一种模块化方法,可以使用3D激光雷达传感器检测,跟踪和分类人员。它结合了多个原则:用于对象分割的强大实现,带有本地几何描述符的分类版和跟踪解决方案。此外,我们通过在没有任何以前的环境知识的情况下通过运动检测和运动预测来获取和预测感兴趣的区域来减少要处理和预测感兴趣的区域的积分数量,从而在低绩效机器中实现了实时解决方案。此外,由于局限性的视图或极端姿势变化,例如蹲伏,跳跃和拉伸,我们的原型即使在具有挑战性的情况下也能够成功地检测和跟踪人员。最后,在室内环境中进行的多个真实的3D激光雷达传感器记录中测试并评估了所提出的解决方案。与最先进的方法相比,结果在人体的积极分类中特别高。