首页 > 其他分享 >香港大学最新工作,首个基于事件相机的双目视觉惯性里程计

香港大学最新工作,首个基于事件相机的双目视觉惯性里程计

时间:2023-01-29 11:11:42浏览次数:63  
标签:基于 香港大学 ESVIO 双目 里程计 相机 事件 视觉

以下内容来自从零开始机器人SLAM知识星球 每日更新内容

点击领取学习资料 → 机器人SLAM学习资料大礼包

论文# ESVIO: Event-based Stereo Visual Inertial Odometry

论文地址:https://arxiv.org/abs/2212.13184

作者单位:香港大学机械工程系

异步低延迟事件流的事件相机为具有挑战性的情况下的状态估计提供了很大的机会。近年来,基于事件的视觉里程计研究得到了广泛的研究,但大多数是基于单目的,对双目事件视觉的研究很少。在本文中,我们提出了ESVIO,第一个基于事件的双目视觉惯性里程计,它利用了事件流、标准图像和惯性测量的互补优势。该方法实现了连续双目事件流之间的时间跟踪和匹配,从而获得了鲁棒状态估计。

此外,利用IMU和ESVIO后端将每个事件为参考时刻,设计了运动补偿方法来强调场景边缘。我们验证了ESIO(纯基于事件)和ESVIO(带有图像辅助的事件)在公共和自收集数据集上与其他基于图像和基于事件的基线方法相比具有更好的性能。此外,我们使用我们的方法在低光环境下执行机载四旋翼飞行。为了证明长期有效性,还进行了真实世界的大规模实验。这项工作是一个实时、准确的系统,旨在具有挑战性的环境下进行鲁棒的状态估计。

本文贡献如下:

1、为了在激烈运动和弱光场景下实现鲁棒状态估计,我们提出了第一个基于滑动窗口图优化的纯事件双目VIO (ESIO)。

2、针对连续双目事件流中基于事件的立体特征跟踪与匹配问题,设计了基于几何的时序事件特征跟踪方法和基于瞬时事件的立体特征匹配方法。这两种方法保证了状态估计的准确性和可靠性。

3、我们评估我们的ESVIO可以在公开可用的数据集上实现最先进的性能。在评估我们的方法期间,我们还发布了一个非常具有挑战性的基于事件的VO/VIO数据集。最后,我们使用我们的ESVIO作为估计量,执行机载闭环四旋翼飞行。







以上内容来自从零开始机器人SLAM知识星球 每日更新内容

标签:基于,香港大学,ESVIO,双目,里程计,相机,事件,视觉
From: https://www.cnblogs.com/CV-life/p/17072075.html

相关文章

  • 贴图填满相机视口
    效果图1)FillCamera.shader和材质FillCamera.mat,将材质贴图设置为bg2)场景中创建一个Quad(Plane不行),材质设置为FillCamera.mat FillCamera.shaderShader"My/......
  • 自定义生成相机标定棋盘图
    自定义生成相机标定棋盘图Writtenon2023-01-22.参考资料:A4、A3、A2、A1纸张尺寸大小毫米(mm)转像素点(px)生成棋盘格(标定板图片)摘自图片像素尺寸(厘米/英寸)换算器、......
  • 相机与图像
    1:https://blog.csdn.net/ncepu_Chen/article/details/105322585中的ch052:https://zhuanlan.zhihu.com/p/356546894#:~:text=图像物理坐标系是用物理单位(例如毫米)表示像......
  • 【三维重建系列】相机模型部分公式详解记录
    相机模型P矩阵公式:\[P=KR[I|-C^{\backsim}]\]其中\(C^{\backsim}\)表示平移矩阵为齐次坐标即世界坐标系原点到相机坐标系原点的距离\(R\)同样表达的也是这个关系......
  • 基于双目相机拍摄图像的深度信息提取和目标测距matlab仿真
    1.算法描述双目相机一般由左眼和右眼两个水平放置的相机组成。当然也可以做成上下两个目,但我们见到的主流双目都是做成左右的。在左右双目的相机中,我们可以把两个相机都看......
  • 基于双目相机拍摄图像的深度信息提取和目标测距matlab仿真
    1.算法描述       双目相机一般由左眼和右眼两个水平放置的相机组成。当然也可以做成上下两个目,但我们见到的主流双目都是做成左右的。在左右双目的相机中,我们可以......
  • CCD相机一些粗浅理解
    1,通过算法,把图放在一个范围内寻找所需要的轮廓或者边2,曝光度越高,越亮,曝光值越低,越暗;对于有反光找边不是很容易,需要优化算法3,当我们所寻找的范围越大,我们模板越宽泛,所找到......
  • 上下相机对位贴合怎么标定原理
    上下相机对位贴合标定原理:相机标定主要采用九点标定,通过走九个点位,得到图像坐标系与机械坐标系的关系。标定步骤:1、上相机标定。2、下相机标定。3、上下对位。相机标定方......
  • unity 利用相机截图,可以截取UI,保存png格式,可用于签名抠图
    publicCameracam;voidStart(){StartCoroutine(CaptureAlphaCamera(cam,newRect(0,0,1920,1080)));}#region截取透明图///<sum......
  • Basler相机功能支持、参数代码查看
    Cameras|Basler(baslerweb.com)以查看acA3088-57umMED为例,查看是否支持Binning功能。   ......