WayveScenes101:自动驾驶中新视角合成的数据集与基准
内容提要
本文探讨了自主驾驶车辆的测试与数据集创建,提出了新颖的模拟数据集和基准测试,以解决现有方法的不足。研究涵盖多模态数据生成、3D物体检测、视觉问答任务及大规模场景数据集,旨在提升自动驾驶系统的性能和泛化能力。
关键要点
-
创建遵循安全临界场景的自主驾驶车辆测试至关重要。
-
提出了新颖的驾驶视图合成数据集和基准测试,以解决现有方法的不足。
-
研究了用已有数据集进行数据注释以生成多模态数据的方法,优化智能车辆系统中的数据模拟。
-
介绍了一个新的大规模、高质量的自动驾驶数据集,包含1150个场景,标注为2D和3D框。
-
提出了针对自动驾驶场景的视觉问答任务NuScenes-QA,包括34K个视觉场景和460K个问题-答案对。
-
基于ONCE数据集的3D物体检测,包含1百万个激光雷达场景和700万对应的相机图像。
-
提出了第一个大规模的开放式模拟数据集,包含超过70个场景和232913个标注的三维车辆边界框。
-
RoScenes是最大的多视角路边感知数据集,提供了对交通场景的全面研究。
-
DL3DV-10K数据集包含来自10,510个视频的51.2百万帧,涵盖65种感兴趣位置。
-
SkyScenes数据集展示了不同布局和条件下的多样性,证明了模型的泛化性能。
-
nuTonomy场景数据集包含所有传感器的标注,定义了新的3D检测和跟踪指标。
延伸问答
WayveScenes101数据集的主要目的是什么?
WayveScenes101数据集旨在提升自动驾驶系统的性能和泛化能力,解决现有方法的不足。
NuScenes-QA任务包含哪些内容?
NuScenes-QA任务包括34K个视觉场景和460K个问题-答案对,旨在回答基于街景线索的自然语言问题。
RoScenes数据集的特点是什么?
RoScenes是最大的多视角路边感知数据集,具有显著大的感知区域和完整的场景覆盖,适用于挑战性的交通场景研究。
DL3DV-10K数据集包含哪些类型的数据?
DL3DV-10K数据集包含来自10,510个视频的51.2百万帧,涵盖65种感兴趣位置,具有不同的反射、透明度和照明条件。
SkyScenes数据集的实验结果表明了什么?
SkyScenes数据集的实验表明,训练模型对不同实际情境具有良好的泛化性能,并且结合真实图像训练可以提高实际表现。
如何优化智能车辆系统中的数据模拟?
通过用已有数据集进行数据注释生成多模态数据,可以优化智能车辆系统中的数据模拟,实现高保真模拟并增加样本多样性。