首页 > 其他分享 >《DNK210使用指南 -CanMV版 V1.0》第三十六章 image图像色块追踪实验

《DNK210使用指南 -CanMV版 V1.0》第三十六章 image图像色块追踪实验

时间:2024-11-08 15:42:18浏览次数:1  
标签:色块 blobs 阈值 image V1.0 追踪实验 图像 threshold

第三十六章 image图像色块追踪实验

1)实验平台:正点原子DNK210开发板

2)章节摘自【正点原子】DNK210使用指南 - CanMV版 V1.0

3)购买链接:https://detail.tmall.com/item.htm?&id=782801398750

4)全套实验源码+手册+视频下载地址:http://www.openedv.com/docs/boards/k210/ATK-DNK210.html

5)正点原子官方B站:https://space.bilibili.com/394620890

6)正点原子K210技术交流企鹅群:605557868

在上一章节中,介绍了image模块中图像特征检测方法给的使用,本章将继续介绍image模块中图像色块追踪方法的使用。通过本章的学习,读者将学习到image模块中图像色块追踪的使用。
本章分为如下几个小节:
36.1 image模块图像色块追踪方法介绍
36.2 硬件设计
36.3 程序设计
36.4 运行验证

36.1 image模块图像色块追踪方法介绍
image模块为Image对象提供了find_blobs()方法,用于查找图像中的所有色块,find_blobs()方法如下所示:

image.find_blobs(thresholds, invert=False, roi, x_stride=2, y_stride=1, area_threshold=10, pixels_threshold=10, 
merge=False, margin=0, threshold_cb, merge_cb)

find_blobs()方法用于根据指定的颜色阈值查找图像中的所有色块,并返回image.blob对象列表。
thresholds指的是颜色阈值,该参数必须是元组列表,对于灰度图,每个阈值元组需包含两个值,分别为最小灰度值和最大灰度值,对于RGB565图像,每个阈值元组需要包含六个值,分别是LAB色彩空间下,L、A、B三个通道的最大值和最小值,若要追踪多种颜色的色块,可以在阈值元组列表中传入多个阈值元组。
invert指的是是否对阈值进行翻转操作,阈值翻转后,将追踪阈值之外的色块。
roi指的是对Image对象感兴趣的区域,若未指定,即为图像矩形。
x_stride和y_stride指的是图像处理时需要跳过的X和Y像素的数量,若已知被检测色块较大,可以增加该参数。
area_threshold指的是边界框区域阈值,边界框区域小于该参数的色块将会被过滤。
pixels_threshold指的是像素数量阈值,像素数量小于该参数的速快将会被过滤。
merge指的是是否合并边缘矩形相互交错重重叠且没有被过滤的色块。
margin指的是增大或减小相较测试用色块边界矩形的大小。
threshold_cb指的是阈值过滤的回调函数,该函数会接收到被过滤色块的image.blob对象,并通过返回True来保留色块,通过返回False来过滤色块。
merge_cb指的是色块合并回调函数,该函数会接收到两个即将被合并的色块的image.blob对象,并通过返回True来合并色块,通过返回False来禁止色块合并。
find_blobs()方法会返回image.blobs对象列表。
find_blobs()方法的使用示例如下所示:

import image
img = image.Image(size=(320, 240))
threshold = (8, 63, 8, 49, -77, -36)
blobs = img.find_blobs([threshold], False, (0, 0, img.width(), img.height()), x_stride=2, y_stride=1, 
area_threshold=10, pixels_threshold=10, merge=True, margin=10)
for b in blobs:
    img.draw_rectangle(b.rect(), color=(255, 0, 0))

关于颜色阈值的设定,CanMVIDE软件提供了“阈值编辑器”工具,可以方便地获取到想要的阈值。通过依次点击CanMV IDE软件上方工具栏中的“工具”à“机器视觉”à“阈值编辑器”,即可打开“阈值编辑器”工具,打开时会提示需要导入一张源图像,可以直接使用“帧缓冲区”窗口中的图像,也可以从本地文件系统中选取,如下图所示:

图36.1.1 打开“阈值编辑器”工具

选好源图像后,便会自动打开“阈值编辑器”工具窗口,接着便可通过提供的一些选项列表和滑块来调整需要的阈值,如下图所示:

图36.1.2 “阈值编辑器”工具窗口

36.2 硬件设计
36.2.1 例程功能

  1. 获取摄像头输出的图像,并使用image模块对图像进行色块追踪,追踪到色块后将其框出,最后将图像显示在LCD上。

36.2.2 硬件资源
本章实验内容,主要讲解image模块的使用,无需关注硬件资源。

36.2.3 原理图
本章实验内容,主要讲解image模块的使用,无需关注原理图。

36.3 程序设计
36.3.1 image模块图像色块追踪方法介绍
有关image模块图像色块追踪方法的介绍,请见第36.1小节《image模块图像色块追踪方法介绍》。

36.3.2 程序流程图

图36.3.2.1image图像色块追踪实验流程图

36.3.3 main.py代码
main.py中的脚本代码如下所示:

import lcd
import sensor
import gc
lcd.init()
sensor.reset()
sensor.set_framesize(sensor.QVGA)
sensor.set_pixformat(sensor.RGB565)
sensor.set_hmirror(False)
sensor.set_auto_gain(False, gain_db=6.0)
sensor.set_auto_whitebal(False)
while True:
    img= sensor.snapshot()
    # 色块追踪
   threshold = (7, 63, -21, 46, -71, -23)
   blobs = img.find_blobs([threshold], False, (0, 0, img.width(), img.height()), x_stride=2, y_stride=1, 
area_threshold=10, pixels_threshold=10, merge=True, margin=10)
    for b in blobs:
       img.draw_rectangle(b.rect(), color=(255, 0, 0))
    lcd.display(img)
    gc.collect()

可以看到一开始是先初始化了LCD和摄像头,并且需要注意的是,在进行色块追踪时,需要关闭摄像头的自动增益和自动白平衡,才能得到更好的效果。
接着在一个循环中不断地获取摄像头输出的图像,因为获取到的图像就是Image对象,因此可以直接调用image模块为Image对象提供的各种方法,然后就是对图像进行色块追踪,并将其在图像中框出,最后在LCD显示图像。

36.4 运行验证
将DNK210开发板连接CanMV IDE,点击CanMV IDE上的“开始(运行脚本)”按钮后,便能看到LCD上显示了摄像头输出的图像,并且指定颜色阈值的色块也被框了出来,如下图所示:

图36.4.1 框出追踪到的色块

标签:色块,blobs,阈值,image,V1.0,追踪实验,图像,threshold
From: https://www.cnblogs.com/zdyz/p/18535219

相关文章

  • 103_api_intro_imagerecognition_pdfsplitter
    PDF分割拆分API数据接口文件处理,PDF高效的PDF分割工具,高效处理,可永久存储。1.产品功能高效处理大文件;支持多语言字符识别;支持formdata格式PDF文件流传参;支持设置每个PDF文件的页数;输出文件永久CDN存储;全接口支持HTTPS(TLSv1.0/v1.1/v1.2/v1.3);全......
  • dicom DCM_RETIRED_ImagePosition
    改标签已经废弃不建议使用特别是在医学影像如CT或MRI中这个标签描述了图像切片的坐标在患者体内的位置新的替代标签RTImagePosition((0054,0220))【适用领域:放射治疗】描述:这个标签描述了放射治疗中的影像位置,用于放射治疗中的精确定位。它主要用于记录和处理......
  • Failed to load local image resource(在小程序中,`src` 属性需要使用双花括号 `{{ }}`
    文章目录修改WXML文件确保图像文件路径正确检查逻辑层代码总结[渲染层网络层错误]Failedtoloadlocalimageresource/components/antiFakeQuery/imageSrctheserverrespondedwithastatusof500(HTTP/1.1500InternalServerError)(env:Windows......
  • CDDFuse: Correlation-Driven Dual-Branch Feature Decomposition for Multi-Modality
    文章信息标题CDDFuse:Correlation-DrivenDual-BranchFeatureDecompositionforMulti-ModalityImageFusion会议及时间CVPR2023主要内容为了解决建模跨模态特征和分解期望模态特有和模态共有特征的挑战,本文提出了一种用于多模态图像融合的双分支Transformer-CNN架构CDD......
  • .NET 图像处理库 ImageSharp 退出 .NET 基金会
    .NET图像处理库ImageSharp退出.NET基金会OSCHINA 已关注 5人赞同了该文章出品|开源中国ImageSharp是一个流行的.NET项目,也是.NET生态中强大、跨平台的图像处理库。  今年早些时候,该项目负责人JamesSouth宣布计划变更ImageSh......
  • .NET 8 高性能跨平台图像处理库 ImageSharp
    阅读目录前言项目介绍项目使用常用方法常用滤镜项目地址总结最后前言传统的System.Drawing库功能丰富,但存在平台限制,不适用于跨平台开发。.NET8的发布,ImageSharp成为了一个更好的选择。ImageSharp是一个完全开源、高性能且跨平台的图像处理库,专为.NET设计......
  • .NET 8 高性能跨平台图像处理库 ImageSharp
    合集-.NET开源项目(27) 1.推荐一款界面优雅、功能强大的.NET+Vue权限管理系统08-052..NET开源权限认证项目MiniAuth上线08-063..NET与LayUI实现高效敏捷开发框架08-084..NET8+Blazor多租户、模块化、DDD框架、开箱即用08-095.推荐一个优秀的.NETMAUI组件......
  • 《DNK210使用指南 -CanMV版 V1.0》第三十五章 image图像特征检测实验
    第三十五章image图像特征检测实验1)实验平台:正点原子DNK210开发板2)章节摘自【正点原子】DNK210使用指南-CanMV版V1.03)购买链接:https://detail.tmall.com/item.htm?&id=7828013987504)全套实验源码+手册+视频下载地址:http://www.openedv.com/docs/boards/k210/ATK-DNK210.htm......
  • 一款开源简洁高颜值的酷狗第三方客户端V1.0.0 Beta
    MoeKoeMusic前言早在10年前后的样子,那会在用网页版QQ的时候我就已经开始使用酷狗音乐了(也是十来年的老粉了),所以这些年收藏的歌曲全部都在上面.后来我也尝试开始使用网易云或QQ音乐,也尝试把酷狗的歌单导入进去,但是效果都不尽人意.我听的大多是日漫OP,好多歌曲都没办法......
  • 软件工程课程项目“物品复活“软件开发v1.0
    项目地址:https://github.com/specture724/ItemReviveApp作业要求大学生经常有些物品觉得扔掉可惜,不处理又觉得浪费自己的地方。请你编写一个物品“复活”软件该程序允许添加物品的信息(物品名称,物品描述,联系人信息),删除物品的信息,显示物品列表,也允许查找物品的信息你实现的程序......