首页 > 其他分享 >自动驾驶三维车道线检测系列—OpenLane数据集介绍

自动驾驶三维车道线检测系列—OpenLane数据集介绍

时间：2024-07-28 12:54:47浏览次数：12  
标签：... 车道 xxx 三维 json OpenLane segment 1000

文章目录

1. 背景介绍

自动驾驶技术的发展日新月异，而3D车道感知是其核心之一。本文将深入介绍OpenLane数据集——迄今为止规模最大、最接近真实世界的3D车道数据集。我们将一起探索其背景、详细内容、坐标系定义以及如何有效利用这一宝贵资源，以推动自动驾驶技术的研究与发展。

自动驾驶技术正逐渐从梦想走向现实，而精确的车道识别是实现安全自动驾驶的关键。传统的2D车道数据集虽然在学术界和工业界得到了广泛应用，但它们往往无法满足3D车道感知的需求。为了填补这一空白，OpenLane数据集应运而生，为研究者提供了一个全新的平台。

参考paper：PersFormer: 3D Lane Detection via Perspective Transformer and the OpenLane Benchmark

在这里插入图片描述

2. OpenLane数据集详细描述

OpenLane数据集以其真实性和规模著称。它收集了来自公共感知数据集的宝贵内容，涵盖了1000个路段的车道和最近路径对象（CIPO）注释。总体上，OpenLane包含了200K帧图像和超过880K条精心标注的车道信息。

2.1 数据集特点

  • 真实世界场景：所有数据均来源于真实世界的驾驶场景，包括城市道路、高速公路等多样环境。
  • 大规模覆盖：数据集规模空前，为研究者提供了丰富的样本进行模型训练和测试。
  • 高精度标注：每一条车道都经过了细致的人工标注，确保了数据的准确性和可靠性。
  • 多维度信息：除了车道线，还提供了CIPO等关键信息，为3D感知提供了更多维度的数据支持。

2.2 坐标系定义

OpenLane数据集采用相机坐标系（Camera Coordinate System）来定义车道的位置。所有标注均以精确的坐标点和相应的属性信息呈现，便于研究者进行空间分析和算法开发。坐标系参考：Three camera coord sys in eval code

详细解释如下：
Waymo（OpenLane）的相机坐标系定义为：X轴向前，Y轴向左，Z轴向上。
这与广泛使用的常规（标准）相机坐标系不同，在常规坐标系中：X轴向右，Y轴向下，Z轴向前。

3. 使用方法

OpenLane数据集的使用方法灵活多样，适用于不同类型的研究和应用开发：

  1. 数据预处理：根据研究需求对原始数据进行清洗和格式化，以适配特定的算法框架。
  2. 模型训练：使用标注的车道数据训练深度学习模型，进行车道检测和预测。
  3. 算法测试：在数据集上测试车道感知算法的性能，评估算法的准确性和鲁棒性。
  4. 可视化分析：利用数据可视化工具展示车道线和CIPO的分布，加深对场景的理解。

数据集下载参考：Download

数据集目录组织格式如下：

├── images
|   ├── training
|   |   ├── segment-xxx
|   |   |   ├── xxx.jpg
|   |   |   └── ...
|   |   ├── segment-xxx
|   |   |   ├── xxx.jpg
|   |   |   └── ...
|   |   └── ...
|   └── validation
|       ├── segment-xxx
|       |   ├── xxx.jpg
|       |   └── ...
|       ├── segment-xxx
|       |   ├── xxx.jpg
|       |   └── ...
|       └── ...
├── cipo
|   ├── training
|   |   ├── segment-xxx
|   |   |   ├── xxx.jpg.json
|   |   |   └── ...
|   |   ├── segment-xxx
|   |   |   ├── xxx.jpg.json
|   |   |   └── ...
|   |   └── ...
|   └── validation
|       ├── segment-xxx
|       |   ├── xxx.jpg.json
|       |   └── ...
|       ├── segment-xxx
|       |   ├── xxx.jpg.json
|       |   └── ...
|       └── ...
├── lane3d_300
|   ├── training
|   |   ├── segment-xxx
|   |   |   ├── xxx.json
|   |   |   └── ...
|   |   ├── segment-xxx
|   |   |   ├── xxx.json
|   |   |   └── ...
|   |   └── ...
|   ├── validation
|   |   ├── segment-xxx
|   |   |   ├── xxx.json
|   |   |   └── ...
|   |   ├── segment-xxx
|   |   |   ├── xxx.json
|   |   |   └── ...
|   |   └── ...
|   └── test
|       ├── curve_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── extreme_weather_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── intersection_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── merge_split_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── night_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── up_down_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── curve.txt
|       ├── extreme_weather.txt
|       ├── intersection.txt
|       ├── merge_split.txt
|       ├── night.txt
|       └── up_down.txt
├── lane3d_1000
|   ├── training
|   |   ├── segment-xxx
|   |   |   ├── xxx.json
|   |   |   └── ...
|   |   ├── segment-xxx
|   |   |   ├── xxx.json
|   |   |   └── ...
|   |   └── ...
|   ├── validation
|   |   ├── segment-xxx
|   |   |   ├── xxx.json
|   |   |   └── ...
|   |   ├── segment-xxx
|   |   |   ├── xxx.json
|   |   |   └── ...
|   |   └── ...
|   └── test
|       ├── curve_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── extreme_weather_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── intersection_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── merge_split_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── night_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── up_down_case
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   ├── segment-xxx
|       |   |   ├── xxx.json
|       |   |   └── ...
|       |   └── ...
|       ├── 1000_curve.txt
|       ├── 1000_extreme_weather.txt
|       ├── 1000_intersection.txt
|       ├── 1000_merge_split.txt
|       ├── 1000_night.txt
|       └── 1000_up_down.txt
└── scene
    └── SCENE
        └── scene.json

通用规则说明：我们使用XXX来泛指图像、CIPO（最近路径对象）、lane3d_300和lane3d_1000。我们在XXX/training/和XXX/validation/下提供训练/验证数据集分割，这与Waymo原始的训练/验证分割保持一致。XXX/training/segment-xxx表示后续文件属于一个完整路段。
文件夹结构详解：

  • images/: 此文件夹包含Waymo开放数据集中的所有前视原始图像文件。我们从原始的tfrecord格式中提取了它们。总共包含1000个路段，其中798个用于训练，202个用于验证。
  • cipo/: 此文件夹包含所有CIPO注释。有关真实值JSON文件的详细信息，请参考CIPO注释文档。
  • lane3d_1000/: 此文件夹包含所有2D/3D车道注释。除了训练/验证分割外，我们在lane3d_1000/test/下提供了几种场景案例。每个案例包含从验证集中选取的特定主题的路段。我们在lane3d_1000/test/1000_XXX.txt中提供了相应的图像名称。有关真实值JSON文件的详细信息，请参考车道注释文档。
  • lane3d_300/: 此文件夹从lane3d_1000/中包含了一个小型数据集。我们为那些计算资源有限的用户提供此数据集。总共包含300个序列，其中240个用于训练，60个用于验证。
  • scene/: 此文件夹包含所有场景注释。它只有一个JSON文件。有关JSON文件的详细信息，请参考CIPO注释文档。

更好的理解：

  • 图像文件夹：存放了Waymo开放数据集中的1000个路段的前视图原始图像，分为798个训练路段和202个验证路段。
  • CIPO注释：提供了CIPO（最近路径对象）的详细注释信息，具体细节见CIPO注释文档。
  • 3D车道1000：提供了2D和3D车道的详细注释，包括训练/验证分割和特定场景测试案例，场景案例的细节和图像名称列表见对应文本文件。
  • 3D车道300：为计算资源受限用户提供的小型数据集，包含240个训练序列和60个验证序列。
  • 场景注释：包含场景的总体注释，详情见单一的JSON文件。

4. 结论

OpenLane数据集的发布，为自动驾驶领域的研究者提供了一个前所未有的研究资源。它不仅推动了3D车道感知技术的发展，也为整个自动驾驶技术的进步贡献了重要力量。我们期待研究社区能够利用这一数据集，开发出更加智能和安全的自动驾驶系统。
在这里插入图片描述

标签：...,车道,xxx,三维,json,OpenLane,segment,1000
From： https://blog.csdn.net/u013889591/article/details/140737986

相关文章

  • 基于kalman滤波的UAV三维轨迹跟踪算法matlab仿真
    1.程序功能描述      使用卡尔曼滤波对UAV在三维空间场景中的运动轨迹进行预测和估计，最后输出预测轨迹，估计轨迹以及三维空间轨迹估计结果。 2.测试软件版本以及运行结果展示MATLAB2022a版本运行  3.核心程序  fork=1:length(X_direct)-1%第一个......
  • 与草图中的线性阵列、圆周阵列、镜像类似，在特征即三维实体里面也有线性阵列、圆周阵列
    问题描述：与草图中的线性阵列、圆周阵列、镜像类似，在特征即三维实体里面也有线性阵列、圆周阵列、镜像，他们的定义、功能和实现步骤是什么呢？需要注意实体的镜像，需要选中的是要选中要镜像的实体，而不是要镜像的特征。否则会报第三张图那样的错误。问题解答：在SolidWorks中，......
  • 粗糙表面分析处理和三维表面形貌处理参数提取分析
    粗糙表面生成，三维形貌生成，三维表面生成，三维形貌仿真，表面形貌处理，表面形貌参数提取。粗糙表面分析处理，表面形貌处理：各种参数(高度参数，函数参数，空间参数，混合参数，体积参数，分层表面参数，特征参数等等表面参数计算提取(自相关长度，均值,均方根偏差，偏度峰度，峰谷，谷深，五点峰高，空度系数，均......
  • 三维点云中常用的表面重建算法
    表面重建算法起源于计算机视觉和计算几何学领域。早期的研究集中在从二维图像中提取三维信息。然而，随着三维扫描技术的进步，越来越多的研究转向了如何从点云数据中重建表面。三维点云表面重建技术的发展，始于20世纪90年代，主要推动力是激光扫描和结构光扫描的广泛应用。Resulto......
  • 立交桥 API 和道路车道
    我用Python编写了一个脚本，给定纬度/经度，生成包含道路边缘、人行横道和车道的geojson。它看起来像这样：deffetch_intersection_data(lat,lon,radius:int=20):"""FetchintersectiondatafromOpenStreetMapusingOverpassAPIandconverttoGeoJSON.......
  • std的map或者set中，比较浮点类型二维三维数据
    在map和set中，如果比较对象是二维或者三维数据，需要把二维三维数据的浮点数转换为比较精度。如果比较精度是0.001，那么数据的精度也必须是0.001，不然会出现如下情况：比较函数 structPoint001Comp{booloperator()(constPoint*l,constPoint*r)const{i......
  • SketchUp v2023 激活版下载与安装教程 (强大的绘图三维建模工具)
    前言Sketchup草图大师专业版，一套面向建筑师、城市规划专家、制片人、游戏开发者以及相关专业人员的3D建模程序，全球知名的三维建模软件，强大的绘图工具、建模渲染、扩展插件和渲染器模板、海量3D模型库及建模灯光材质渲染效果图，用于建筑师、城市规划专家、游戏开发等行业。......
  • 中望CAD 机械 v2024 解锁版下载与安装教程 (CAD三维制图)
    前言中望CAD机械版是一款国产CAD制图软件，专为机械设计而打造。中望CAD机械版2024中文版拥有丰富的标准零件图库，提供绘图标准规范，并支持定制化需求。其智能注释功能更是一大亮点，通过一个命令即可完成80%的标注工作，极大提高了绘图效率。一、下载地址下载链接:中望CAD机械......
  • 单目三维内容生成系列—Zero-1-to-3: Zero-shot One Image to 3D Object
    文章目录1.概述2.背景介绍3.方法3.1学习控制相机视角3.2视角条件扩散3.33D重建3.4数据集4.实验评测4.1任务4.2基线4.3基准和指标4.4新视角合成结果4.53D重建结果4.6从文本到图像到3D5.讨论1.概述我们介绍了Zero-1-to-3框架，该框架仅需一张RGB图像即......
  • 转换实体包含了拉伸凸台/基体，转换实体引用中的引用是什么意思呢？等距实体等距的是二维
    问题描述：草图编辑功能包含哪些呢？裁剪实体、转换实体引用、等距实体。裁剪实体也有延伸实体的作用，按着shift拖动鼠标即可。转换实体包含了拉伸凸台/基体，转换实体引用中的引用是什么意思呢？转换实体引用可以将几何中已有的线段提取到现在正在绘制的草图中。等距实体等距的是二维......

赞助商

阅读排行

网站主页关于我们联系我们网站地图

本网站内容转载自其他媒体，侵权联系[admin##ips99.com]。

Copyright © 2020-2023 IPS99 版权所有 IPS99