首页 > 其他分享 >基于ZYNQ的DVS/Event-based Camera项目

基于ZYNQ的DVS/Event-based Camera项目

时间:2023-10-30 23:23:35浏览次数:39  
标签:based 项目 -- 相机 芯片 Camera ZYNQ DVS

一、项目简介

本项目以zynq100为主体,使用索尼IMX646(1280×720)Event-based光传感器芯片,事件相机,也叫动态视觉相机。项目从设计芯片外围电路到使用FPGA采集数据,再到用以太网传输数据,最后到对数据处理可视化,本人独立负责整个架构设计与实现。

二、项目架构

以数据流向展示整体架构,具体细节不作赘述:

graph LR A(Chip) B(MIPI CSI-2) C(FIFO) D(DMA) E(Ethenet) F(Processing) A-->B-->C-->D-->E-->F

Chip上的RAW数据经过MIPI接口写入PL端FIFO,ARM核通过DMA读取数据并经以太网口将数据传输到上位机上,在上位机上对采集的数据进行解析和可视化。芯片通过PS端IIC进行配置。

三、项目展示

1、图片
image

2、视频
压缩文件包含三个简单演示视频,涉及手部动作、手环、条纹、笔、盒子、文字等元素(视频压缩较多,建议小尺寸播放)。
https://files.cnblogs.com/files/blogs/683126/相机演示视频.zip?t=1698674915&download=true

四、不足与展望

1、根据芯片原理可知外界光源闪烁会导致噪点,本项目并未配置光源同步,也没有做图像处理,图像噪点较多。我的任务已经完成,不负责该项目的后续打磨。
2、设备性能冗余太多,不推荐用ZYNQ做产品。建议使用Contex-A系列STM32进行设计,可以大大减小体积,大大节省成本。
3、一方面,DVS相机具有超低延时和高动态范围等优点,可以弥补传统视觉相机的不足,为业界带来新的解决方案;另一方面,针对DVS相机的图像处理算法算法也给学术界带来新的研究方向。最后,我很期待DVS相机在准确识别、高速追踪和快速决策等方面的应用。

标签:based,项目,--,相机,芯片,Camera,ZYNQ,DVS
From: https://www.cnblogs.com/hit-ztx/p/17798763.html

相关文章

  • Tabular Value-Based Reinforcement Learning
    ReadingNotesaboutthebookDeepReinforcementLearningwrittenbyAskePlaatRecently,IhavebeenreadingthebookDeepReinforcementLearningwrittenbyAskePlaat.ThisbookisagoodintroductiontothetheoryofDeepReinforcementLearning.Andit......
  • Markov Decision Process Model Based on Value Iteration
    TheoriesMarkovDecisionProcessGenerally,wenotesaMDPmodelas\((S,A,T_a,R_a,\gamma)\).Itstransitionfunctionis\(T_a(s,s')=\Pr(s_{t+1}|s_t=s,a_t=a)\),rewardfunctionis\(R_a(s,s')\).Andactionschoosingsatisfiesaspec......
  • Signal Filters Design Based on Digital Signal Processing
    ThoeriesI.FourierSeriesExpansionAlgorithmWecanutilizetheFourierSeriestoproducetheanalogsignalwithsomefrequencycomponents.Foranysignal,itsFourierseriesexpansionisdefinedas\[x(t)=\frac{A_0}{2}+\sum_{n=1}^{\infty}A_n\cos......
  • 论文阅读:DeepKE:A Deep Learning Based Knowledge Extraction Toolkit for Knowledge B
    DeepKE,支持数据集和模型的结合来实现非结构化数据中信息的提取。同时提出框架和一系列的组件来实现足够的模块化和可扩展性。项目地址1.Introduction现存的KB是在实体和关系方面是不完备的。常见的一些标志性的应用:Spacy(实体识别)OpenNER(关系提取)OpenIE(信息提取)RESIN(事......
  • zynq7000 传统方式制作系统镜像 以及yocto
    转载:https://blog.csdn.net/qq_33232152/article/details/1211225991zynq7000传统方式制作系统镜像传统方式制作系统镜像,主要是以下几个步骤:配置zynq芯片ubootkerneldevice-treerootfs打包制作BOOT.BIN和image.ub环境配置安装xilinx的vivado、SDK软件安装gccmakeg......
  • Transformer-based Encoder-Decoder Models
    整理原链接内容方便阅读https://colab.research.google.com/github/patrickvonplaten/notebooks/blob/master/Encoder_Decoder_Model.ipynbtitle:"Transformer-basedEncoder-DecoderModels"thumbnail:/blog/assets/05_encoder_decoder/thumbnail.pngauthors:user:p......
  • Codeforces Round 902 (Div. 2, based on COMPFEST 15 - Final Round)
    \(D.EffectsofAntiPimples\)对每个数字能到达的所有位置先预处理最大值,那么就代表选择这个数字之后真实的贡献,那么对这样的预处理值,最小值显然只有一种做法,为\(2^0\),第二小的值应该可以与最小值一起选择,所以答案为\(2^1\),以此类推之后,每个值乘上对应的2的幂次之后求和即......
  • Paper Reading: Sample and feature selecting based ensemble learning for imbalanc
    目录研究动机文章贡献本文方法基于聚类的分层随机欠采样特征选择样本和特征选择的集成学习基于随机森林的SFSHEL实验结果数据集和实验设置KEEL数据集的比较HeartFailure数据集的比较优点和创新点PaperReading是从个人角度进行的一些总结分享,受到个人关注点的侧重和实力所限......
  • GRLSTM:基于图的残差LSTM轨迹相似性计算《GRLSTM: Trajectory Similarity Computation
    2023年10月18日,14:14。来不及了,这一篇还是看的翻译。论文:GRLSTM:TrajectorySimilarityComputationwithGraph-BasedResidualLSTM(需要工具才能访问)Github: AAAI2023的论文。 摘要轨迹相似性的计算是许多空间数据分析应用中的一项关键任务。然而,现有的方法主要是......
  • [909] Remove duplicated rows based on multiple columns in Pandas
    InaPandasDataFrame,youcanremoveduplicatedrowsbasedonmultiplecolumnsusingthedrop_duplicates()method.Here'showyoucandoit:importpandasaspd#SampleDataFramedata={'A':[1,2,3,2,1],'B':[�......