韶关建网站,推广软文平台,app软件开发的费用设计,深圳市住宅和建设网站5 激光雷达点云检测模型
#x1f98b;#x1f98b;#x1f98b;CenterPoint是Anchor‐Free的3D物体检测器#xff0c;以点云作为输入#xff0c;将三维物体在Bird‐View下的中心点作为关键点#xff0c;基于关键点检测的方式回归物体的尺寸、方向和速度。相比于Anchor‐…5 激光雷达点云检测模型
CenterPoint是Anchor‐Free的3D物体检测器以点云作为输入将三维物体在Bird‐View下的中心点作为关键点基于关键点检测的方式回归物体的尺寸、方向和速度。相比于Anchor‐Based的3D物体检测器CenterPoint不需要人为设定Anchor尺寸面向物体尺寸多样不一的场景时其精度表现更高且简易的模型设计使其在性能上也表现更加高效。 论文题目Center-based 3D Object Detection and Tracking基于中心的3D物体检测和跟踪
论文地址https://arxiv.org/abs/2006.11275
代码地址https://github.com/tianweiy/CenterPoint
【摘要】
3D物体在点云中通常表示为3D盒子。这种表示方法模仿了基于图像的2D边界框检测但也带来了额外的挑战。3D世界中的物体并不遵循任何特定的方向而基于框的检测器很难枚举所有方向或将轴对齐的包围框拟合到旋转的物体上。
在本文中我们转而提出将3D物体表示、检测和跟踪为点。我们的框架CenterPoint首先使用关键点检测器检测物体的中心然后回归到其他属性包括3D大小、3D方向和速度。
在第二阶段它使用物体上的额外点特征来改进这些估计。在CenterPoint中3D目标跟踪简化为贪婪的最近点对匹配。由此得到的检测与跟踪算法简单、高效、有效。
CenterPoint在3D检测和跟踪的nuScenes基准上都取得了最先进的性能单个模型的NDS和AMOTA分别为65.5和63.8。在Waymo公开数据集上CenterPoint的表现大大超过了之前的所有单模型方法并且在所有Lidar-only提交中排名第一。
下图1我们提出了一个基于中心的框架来表示、检测和跟踪物体。
以前的基于锚点的方法使用轴对齐的锚点相对于自我车辆坐标。当车辆在直线道路上行驶时基于锚点和我们的基于中心的方法都能够准确地检测出物体(顶部)。然而在安全关键的左转(下转)期间基于锚点的方法很难将轴对齐的边界框拟合到旋转的物体上。我们的基于中心的模型通过旋转不变的点精确地检测物体。 下图2我们的Centerpoint框架概述。我们依赖一个标准的3D骨架从Lidar点云中提取地图视图特征表示。然后一个2D CNN架构的检测头找到目标中心并使用中心特征回归到完整的3D边界框。该框预测用于在估计的三维包围框的每个面的三维中心处提取点特征并将其传递到MLP中以预测IoU指导的置信度评分和框回归精化。最好彩图观赏。 下图3CenterPoint对Waymo验证的示例定性结果。我们将原始点云显示为蓝色将检测到的物体显示为绿色边界框将边界框内的Lidar点显示为红色。最好彩图观赏。 【结论】
提出了一种基于中心的同时从Lidar点云中检测和跟踪三维目标的框架。我们的方法使用标准的3D点云编码器在头部使用少量卷积层来产生鸟瞰热图和其他稠密的回归输出。检测是一种简单的细化局部峰值提取跟踪是一种最近距离匹配。CenterPoint简单接近实时在Waymo和nuScenes基准测试集上达到了最先进的性能。
【扩展】
1 Tracking algorithm 2 CenterPoint
◎ 对输入的点云进行体素化voxelization也即将点云投影到pillar或者voxels中。
◎ 使用fully connection layer / 3d sparse convolution 提取pillar / voxels中的特征。
◎ 使用max pooling操作将pillar / voxels的特征“压缩”到BEV平面获得BEV特征图。
◎ 使用Second Backbone和Second Neck提取BEV的特征。
◎ head部分。
1.采用anchor‐free的预测方式直接预测目标的center位置。
2.每个不同的类别使用不同head进行预测。
3.预测内容。
内容包括目标中心位置 heatmap、目标中心和所在像素左上角的偏移量 offset、目标的长宽高 、 目标center在激光雷达坐标系中的高度坐标 z、 目标在激光雷达坐标系中的旋转角 rot。 至此本文分享的内容就结束了。
