Select Language

AI社区

公开数据集

MVSEC 多车立体声事件摄像机数据集

MVSEC 多车立体声事件摄像机数据集

27G
1074 浏览
8 喜欢
53 次下载
0 条讨论
Stereo Matching Audio

多车立体声事件摄像机数据集是为针对基于事件的摄像机开发新颖的3D感知算法而设计的数据集合。立体事件数据是从汽车,摩托车,六......

数据结构 ? 27G

    Data Structure ?

    * 以上分析是由系统提取分析形成的结果,具体实际数据为准。

    README.md

    多车立体声事件摄像机数据集是为针对基于事件的摄像机开发新颖的3D感知算法而设计的数据集合。立体事件数据是从汽车,摩托车,六翼飞机和手持数据中收集的,并与激光雷达,IMU,运动捕捉和GPS融合在一起,以提供地面真实姿态和深度图像。此外,我们还提供了基于标准立体框架相机对的图像,可与传统技术进行比较。

    基于事件的摄像机是一种新的异步感应方式,可以测量图像强度的变化。当像素上的对数强度更改为设置的阈值以上时,相机会立即返回更改的像素位置,以及具有微秒精度的时间戳和更改的方向(向上或向下)。这允许以极低的等待时间进行感测。此外,这些相机具有极高的动态范围和低功耗。

    Sequences

    在白天和黑夜的环境下,从室内和室外环境中的四种不同车辆收集数据。所有六轴飞行器序列均具有来自室内Vicon区域和室外Qualisys区域的运动捕获地面真相,而其他序列具有通过将激光雷达信息与IMU和GPS融合而生成的地面真相。序列的完整列表可以在下面找到:


    Sensors

    大量不同的传感器和模式,并牢固地安装在一对立体事件摄像机上,以生成准确的地面真实信息,并为研究模式之间的传感器融合提供途径。

    对于事件,将两个实验DAVIS 346B摄像机以立体声(X轴对齐)配置安装。每个相机的分辨率均为346x260像素,配备4mm镜头和大约70度的垂直视场。摄像机时钟由左摄像机生成的硬件触发器同步,并发送到右摄像机。除事件外,摄像机还分别生成IMU和基于帧的图像测量值。

    Full sensor configuration.

    此外,DAVIS摄像机还安装了带IMU(VI传感器)的Velodyne激光雷达和立体框摄像机。如果可用,还可以使用室内(Vicon,左)或室外(Qualisys,右)运动捕获系统捕获地面真相姿势。

    完整的传感器特性可以在下面找到:

    SensorCharacteristics
    DAVIS 346B346x260 pixels                    
                           APS (Active Pixel Sensor for frame based images)                    
                           DVS (Dynamic Vision Sensor for events)                    
                           FOV: 50° vert., 65° horiz.                    
                           IMU: MPU 6150 at 1kHz
    VI-SensorSkybotix integrated VI-sensor                    
                           stereo camera: 2 x Aptina MT9V034                    
                           gray 2x752x480 at 20fps, global shutter                    
                           FOV: 57deg vert., 2 x 80deg horiz.                    
                           IMU: ADIS16488 at 200Hz
    Velodyne Puck LITEVLP-16 PUCK LITE                    
                           FOV: 30° vert. 360° horiz.                    
                           16 channel                    
                           20Hz                    
                           100m range
    GPSUBLOX NEO-M8N                    
                           72-channel u-blox M8 engine                    
                           Position accuracy 2.0m CEP
    Motion CaptureIndoor Vicon                    
                           88 x 22 x 15 ft                    
                           20 Vicon Vantage VP-16 Cameras                    
                           100Hz pose updates                    
                           Outdoor Qualisys                    
                           100 x 50 x 50 ft                    
                           34 Qualisys Opus 700 Cameras                    
                           100Hz pose updates

    Ground Truth

    对于大多数序列,机载传感器的融合可提供准确的姿态和深度。


    Reconstructed map with trajectory in green.

    Depth map (red) overlaid on APS from DAVIS, lighter is further.

    Citations

    Please cite the following papers when using this work in an academic publication:

    For the main dataset, please cite:

    Zhu, A. Z., Thakur, D., Ozaslan, T., Pfrommer, B., Kumar, V., & Daniilidis, K. (2018). The Multi Vehicle Stereo Event Camera Dataset: An Event Camera Dataset for 3D Perception. IEEE Robotics and Automation Letters, 3(3), 2032-2039.

    An arXiv preprint is also available:

    Zhu, A. Z., Thakur, D., Ozaslan, T., Pfrommer, B., Kumar, V., & Daniilidis, K. (2018). The Multi Vehicle Stereo Event Camera Dataset: An Event Camera Dataset for 3D Perception. arXiv preprint arXiv:1801.10202.

    For the ground truth optical flow, please cite:

    Zhu, A. Z., Yuan, L., Chaney, K., Daniilidis, K. (2018). EV-FlowNet: Self-Supervised Optical Flow Estimation for Event-based Cameras Robotics: Science and Systems 2018.

    License

    Creative Commons License
    This work is licensed under a Creative Commons Attribution-ShareAlike 4.0 International License.



    ×

    帕依提提提温馨提示

    该数据集正在整理中,为您准备了其他渠道,请您使用

    注:部分数据正在处理中,未能直接提供下载,还请大家理解和支持。
    暂无相关内容。
    暂无相关内容。
    • 分享你的想法
    去分享你的想法~~

    全部内容

      欢迎交流分享
      开始分享您的观点和意见,和大家一起交流分享.
    所需积分:0 去赚积分?
    • 1074浏览
    • 53下载
    • 8点赞
    • 收藏
    • 分享