首页 > 其他分享 >Camera | 9.如何让camera支持闪光灯?-基于rk3568

Camera | 9.如何让camera支持闪光灯?-基于rk3568

时间:2023-05-11 23:01:26浏览次数:32  
标签:set Camera rk3568 flash sgm3141 camera FLASH led V4L2

一、闪光灯基本原理

工作模式

Camera flash led分flash和torch两种模式。

  • flash:

拍照时上光灯瞬间亮一下,电流比较大,目前是1000mA,最大电流不能超过led最大承受能力

  • torch:

只用于录video或者拿led当手电筒的情况,电流不能太大,

flash开启需要先从torch过渡,这样电流可以慢慢增大,减少冲击。

二、驱动移植

1. 硬件电路

sgm3141总体来说比较简单,只有两个引脚用于控制:FLASH_EN、FLASH/TORCH。

  • FLASH_EN

闪光灯使能引脚。

  • FLASH/TORCH

此处led flash和TORCH功能共用了同一个gpio。

注意:
有的摄像头是通过pwm来控制闪光灯,具体问题具体分析,不要教条

2. 设备树

瑞芯微sdk中没有专门针对sgm3141的驱动,网上搜了一大圈也没有搜到,很多闪光灯都是基于I2C接口,通过I2C来设置上光灯的工作模式,好在sdk中有类似的芯片rgb13h驱动,该驱动只有一个引脚用于闪光灯,和我们的功能很类似。

参考驱动文件:leds-rgb13h.c

sgm3141设备树节点

       flash_sgm3141:flash-sgm3141 {
               status = "okay";
               compatible = "sgmicro,sgm3141";
               label = "gpio-flash";
               pinctrl-names = "default";
               pinctrl-0 = <&flash_led_gpios>;
               
               led-max-microamp = <20000>;
               flash-max-microamp = <20000>;
               flash-max-timeout-us = <1000000>;
               strobe-gpios = <&gpio3 RK_PC7 GPIO_ACTIVE_HIGH>;
               enable-gpios = <&gpio3 RK_PD0 GPIO_ACTIVE_HIGH>;
               rockchip,camera-module-index = <0>;
               rockchip,camera-module-facing = "back"; 
       };

        ov13850: ov13850@10 {
        	……
            flash-leds = <&flash_sgm3141>;
        	……
        };

pinctrl设置:

 &pinctrl {
       ……
       flash-led {
               flash_led_gpios: flash-led {
                       rockchip,pins =
                       /* flash led enable*/
                       <3 RK_PD0 RK_FUNC_GPIO &pcfg_pull_none>,
                       <3 RK_PC6 RK_FUNC_GPIO &pcfg_pull_none>;
               };
       };
       ……
 };
@drivers/leds/Makefile
obj-y                  += sgm3141.o

驱动模块直接写死,不罗嗦

三、xml

要app支持闪光灯,还需要修改xml文件,打开该功能

@hardware/rockchip/camera/etc/camera/camera3_profiles.xml
@hardware/rockchip/camera/etc/camera/camera3_profiles_rk356x.xml

<flash.info.available value="TRUE"/>

这样,打开app就可以看到上光灯的按钮。

四、拓扑结构

拓扑结构中entity

rk3568_r:/ # media-ctl -d /dev/media0 -p
……
- entity 70: m01_f_ov5648 4-0036 (1 pad, 1 link)
             type V4L2 subdev subtype Sensor
             device node name /dev/v4l-subdev3
        pad0: Source
                [fmt:SBGGR10/2592x1944]
                -> "rockchip-csi2-dphy0":0 []

- entity 74: m00_b_ov13850 4-0010 (1 pad, 1 link)
             type V4L2 subdev subtype Sensor
             device node name /dev/v4l-subdev4
        pad0: Source
                [fmt:SBGGR10/4224x3136]
                -> "rockchip-csi2-dphy0":0 []

- entity 78: m00_b_gpio-flash (0 pad, 0 link)
             type V4L2 subdev subtype Flash
             device node name /dev/v4l-subdev5
  • 摄像头:

m00_b_ov13850、m01_f_ov5648

  • 闪光灯:

m00_b_gpio-flash,v4l2子设备/dev/v4l-subdev5

第4个字母b表示后置摄像头。

五、调试

驱动会通过sysfs创建文件节点

rk3568_r:/sys/class/leds/gpio-flash # ls
brightness  flash_strobe   max_brightness     power      trigger
device      flash_timeout  max_flash_timeout  subsystem  uevent
  • 亮灭灯
亮灯
rk3568_r:/sys/class/leds/gpio-flash # echo 1 > brightness
echo 1 > brightness
灭灯
1|rk3568_r:/sys/class/leds/gpio-flash # echo 0 > brightness
echo 0 > brightness

操作对应函数调用关系

[  374.302386] Call trace:                                                                     
[  374.302428] dump_backtrace+0x0/0x178                                                        
[  374.302471] show_stack+0x14/0x20                                                            
[  374.302518] dump_stack+0x94/0xb4                                                            
[  374.302560] sgm3141_led_brightness_set+0x18/0x40                                            
[  374.302592] led_set_brightness_nopm+0x14/0x48                                               
[  374.302624] led_set_brightness+0x50/0x80                                                    
[  374.302662] brightness_store+0x74/0xc8                                                      
[  374.302691] dev_attr_store+0x18/0x28                                                        
[  374.302728] sysfs_kf_write+0x48/0x58                                                        
[  374.302759] kernfs_fop_write+0xf4/0x220                                                     
[  374.302793] __vfs_write+0x34/0x158                                                          
[  374.302810] vfs_write+0xb0/0x1d0                                                            
[  374.302828] ksys_write+0x64/0xe0                                                            
[  374.302860] __arm64_sys_write+0x14/0x20                                                     
[  374.302904] el0_svc_common.constprop.0+0x64/0x178                                           
[  374.302947] el0_svc_handler+0x28/0x78                                                       
[  374.302984] el0_svc+0x8/0xc                                                                 
[  425.607850] healthd: battery l=50 v=3 t=2.6 h=2 st=3 fc=100 chg=au                          
[  437.663757] CPU: 3 PID: 1727 Comm: sh Not tainted 4.19.232 #326                             
[  437.663869] Hardware name: Rockchip RK3568 EVB1 DDR4 V10 Board (DT)  
  • 闪灯
rk3568_r:/sys/class/leds/gpio-flash # echo 1 > flash_strobe
echo 1 > flash_strobe

操作对应函数调用关系

[  492.026239] Call trace:                                                                     
[  492.026291] dump_backtrace+0x0/0x178                                                        
[  492.026320] show_stack+0x14/0x20                                                            
[  492.026354] dump_stack+0x94/0xb4                                                            
[  492.026391] sgm3141_led_flash_strobe_set+0x24/0x78                                          
[  492.026453] flash_strobe_store+0x88/0xd8                                                    
[  492.026517] dev_attr_store+0x18/0x28                                                        
[  492.026571] sysfs_kf_write+0x48/0x58                                                        
[  492.026620] kernfs_fop_write+0xf4/0x220                                                     
[  492.026683] __vfs_write+0x34/0x158                                                          
[  492.026733] vfs_write+0xb0/0x1d0                                                            
[  492.026784] ksys_write+0x64/0xe0                                                            
[  492.026833] __arm64_sys_write+0x14/0x20                                                     
[  492.026867] el0_svc_common.constprop.0+0x64/0x178                                           
[  492.026912] el0_svc_handler+0x28/0x78                                                       
[  492.026966] el0_svc+0x8/0xc                                                                 
[  494.218112] CPU: 2 PID: 1727 Comm: sh Not tainted 4.19.232 #326                             
[  494.218218] Hardware name: Rockchip RK3568 EVB1 DDR4 V10 Board (DT)  

为方便查看驱动回调函数调用顺序,可以在下面3个回调函数入口增加dump_stack(),
sgm3141_led_brightness_set()
sgm3141_led_flash_strobe_set()
sgm3141_set_ctrl()

六、app 测试驱动 log分析

1. 上电加载驱动log

rk3568_r:/ # dmesg | grep sgm3141
dmesg | grep sgm3141
[    0.853883] sgm3141-flash flash-sgm3141: driver version: 00.01.01
[    0.853956] sgm3141-flash flash-sgm3141: Unable to get pwm device

2. 打开摄像头

打开摄像头功能,app调用ioctl命令如下:

  1. V4L2_CID_FLASH_LED_MODE :app 设置led mode为 V4L2_FLASH_LED_MODE_FLASH(1)
  2. V4L2_CID_FLASH_TIMEOUT :设置超时时间
  3. V4L2_CID_FLASH_STROBE_STOP :停止闪光
[   36.213220] sgm3141 V4L2_CID_FLASH_LED_MODE 1
[   36.213250] sgm3141_set_ctrl(),376
[   36.213256] sgm3141_set_output(),78 0
[   36.213265] sgm3141_led_flash_strobe_set(),166 state=1
[   36.213281] sgm3141_set_output(),78 1

[   36.213298] sgm3141 V4L2_CID_FLASH_TIMEOUT
[   36.213300] sgm3141_set_ctrl(),412
[   36.213308] sgm3141_led_flash_timeout_set(),195 timeout=500000


[   36.213318] sgm3141 V4L2_CID_FLASH_STROBE_STOP 1
[   36.213323] sgm3141_set_ctrl(),406
[   36.213327] sgm3141_led_flash_strobe_set(),166 state=0
[   36.213332] sgm3141_set_output(),78 0
[   36.213461] sgm3141_timeout_work(),117

3. 拍照

拍照功能,app调用ioctl命令如下:

  1. V4L2_CID_FLASH_LED_MODE :设置led mod为 V4L2_FLASH_LED_MODE_TORCH(2),并点灯
  2. V4L2_CID_FLASH_LED_MODE:到达指定超时时间(2.7秒),设置led mod为 V4L2_FLASH_LED_MODE_NONE 0
  3. V4L2_CID_FLASH_LED_MODE:在此设置led mod为V4L2_FLASH_LED_MODE_FLASH(1)
  4. V4L2_CID_FLASH_STROBE_STOP:停止闪光

[   90.246203] sgm3141 V4L2_CID_FLASH_LED_MODE 2
[   90.246251] sgm3141_set_ctrl(),376
[   90.246262] sgm3141_set_output(),78 0
[   90.246277] sgm3141_set_output(),78 1

[   92.902746] sgm3141 V4L2_CID_FLASH_LED_MODE 0
[   92.902775] sgm3141_set_ctrl(),376
[   92.902781] sgm3141_set_output(),78 0

[   93.034903] sgm3141 V4L2_CID_FLASH_LED_MODE 1
[   93.034929] sgm3141_set_ctrl(),376
[   93.034934] sgm3141_set_output(),78 0
[   93.034943] sgm3141_led_flash_strobe_set(),166 state=1
[   93.034959] sgm3141_set_output(),78 1

[   93.034977] sgm3141 V4L2_CID_FLASH_STROBE_STOP 1
[   93.034988] sgm3141_set_ctrl(),406
[   93.034993] sgm3141_led_flash_strobe_set(),166 state=0
[   93.035002] sgm3141_set_output(),78 0
[   93.035058] sgm3141_timeout_work(),117

从log可以看出,app拍照的时候,闪光灯操作是通过v4l2下发的命令,

而我们直接操作宏dev_attr_store创建的文件节点则是通过在sysfs文件节点(brightness flash_strobe)直接调用到操作函数。

4. 退出摄像头

[  317.882459] sgm3141 V4L2_CID_FLASH_LED_MODE 0
[  317.882522] sgm3141_set_ctrl(),376
[  317.882532] sgm3141_set_output(),78 0

七、驱动获取

一口君修改过的驱动已经上传到gitee,获取地址:

https://gitee.com/yikoulinux/sgm3141

交流嵌入式底层开发技术,后台留言,加一口君好友。

标签:set,Camera,rk3568,flash,sgm3141,camera,FLASH,led,V4L2
From: https://www.cnblogs.com/yikoulinux/p/17392501.html

相关文章

  • 不同应用场景瑞芯微RK3568主板方案定制
    随着物联网和智能设备的迅猛发展,瑞芯微RK3568主板方案作为一种高性能的系统System-on-a-chip(SoC),已经成为嵌入式系统、智能家居设备和工业自动化设备等应用场景的首选方案。定制瑞芯微RK3568主板方案可以满足不同应用场景的需求,同时也为企业提供了更多的商业机会。▎行业应用万象......
  • 最新版本Camera Raw 15.3增效工具,新增AI功能
    Ps关于CameraRaw滤镜的消息大家都听了很多很多了,今天给大家分享的就是CameraRaw的最新版本,也就是那个传说中增加了AI功能的版本。对比先前两个版本,15.3在功能上也就做了2个值得关注的更新:1.AI降噪;2.AI智能蒙板。而改动最大的就是蒙版的支持,目前来看,多个AI蒙版的选择和使......
  • 瑞芯微RK3568开发板在智慧交通行业中的应用方案
    智能交通安全监测系统是通过利用高性能处理器和先进的图像处理算法,实现对交通场景的实时监测、分析和预警,以提高交通安全水平。以下是基于RK3568处理器的智能交通安全监测系统产品的应用方案:视频采集与处理:     使用RK3568处理器搭配高清摄像头,进行交通场景的视频采集。R......
  • 国产工业级RK3568核心板-AI人脸识别产品方案
     迅为RK3568开发板采用瑞芯微推出的一款高性能、低功耗的RK3568处理器,其拥有强大的AI计算能力和图像处理能力,非常适合用于人脸识别终端产品的设计。针对人脸识别终端产品,可以采用RK3568处理器搭配摄像头模组、LCD显示屏、声音模组等组成系统。具体方案如下:      摄......
  • 【论文】Range-Focused Fusion of Camera-IMU-UWB for Accurate and Drift-Reduced Lo
    ##Abstract![请添加图片描述](https://img-blog.csdnimg.cn/50c3a8cc38904318b361ef50ea49b889.png)##I.INTRODUCTION为什么需要添加UWB?因为传统的VIO会由于传感器的噪声和计算误差产生累计偏移。所以需要GPS或者是UWB来做修正。UWB则是专注于室内。以前对于UWB的使用一般都是......
  • RK3568用户自定义开机画面功能
    RK方案中的开机画面处画逻辑在RK的方案中,如RK1109,RK1126,RK3568这些嵌入式LINUX方案在开机画面的处理逻辑都是一致的.用户的uboot,kernel开机画面都是同dts,kernel一起入在一个boot.img文件中的.boot.img的文件结构,基本又同Android的boot文件结构类似,具体的文件结构,可以参考uboo......
  • 史上最全! 瑞芯微RK3568核心板评估板资源分享!
    ▎瑞芯微RK3568芯片  高性能处理器:采用四核A55架构CPU,G52GPU;内置NPU,可提供1T算力高可靠性设计:支持DDR及CPUCache全链路ECC内置自研ISP图像处理器:8M@30fps处理能力,强大的HDR功能,支持畸变矫正、去雾、噪点消除等功能丰富的显示、外设及拓展接口:内置HDMI/eDP/LVDS/MIPI/RG......
  • 瑞芯微RK3568开发板发布邮票孔开发板
    瑞芯微RK3568开发板发布邮票孔开发板iTOP-3568邮票孔开发板采用瑞芯微RK3568处理器,22nm工艺制程,集成4核A55架构处理器和MaliG522EE图形处理器,支持4K解码和1080P编码,内置独立的NPU,可用于轻量级人工智能应用,开发板采购底板+核心板的方式,两种连接方式,多种核心板邮票孔连接方......
  • 猛读论文6 |【CVPR 2022】Camera-Conditioned Stable Feature Generation for Isolate
    用于孤立摄像机监督行人重识别的摄像机条件稳定特征生成动机常规ReID,对于一个ID,在不同摄像头拍摄的图片上提取跨相机视图不变特征而ISCS情况下,无法做到同一个ID采集到不同摄像头图片由于跨相机样本在人体Re-ID模型训练中起着重要作用,而在ISCS设置下不存在此类配对图像,因......
  • 大揭秘!瑞芯微RK3568对比RK3399性能解析
    RK3568核心板简介​RK3568核心板是武汉万象奥科基于瑞芯微Rockchip的RK3568设计的一款高性能核心板。它采用四核Cortex-A55架构,最高主频可达2.0GHz,同时集成Mali-G522EEGPU,支持[email protected]/H.264/VP9解码和[email protected]/H.264编码。此外,RK3568支持多种接口,包括USB3.0、PC......