首页 > 编程语言 >桌面应用自动化python——uiautomation API 如何找元素

桌面应用自动化python——uiautomation API 如何找元素

时间:2022-12-18 23:33:30浏览次数:49  
标签:控件 uiautomation 窗口 python window automation 枚举 API

     本文主要用到一个uiautomation的开源框架,是一个咱们中国人写的,支持MFC,Windows Forms,WPF,Metro,Qt界面;此文主要是自己的个人总结,开源作者原文:

gethub地址: https://github.com/yinkaisheng/Python-UIAutomation-for-Windows

        此自动化的主要思想是利用此框架抓取到程序的各种句柄,然后对句柄执行各种操作。

 

一、uiautomation方法

1、WindowContrl(searchDepth,ClassName,SubName)          查找窗口中的程序,如果有中文则需用Unicode;可用window.Exists(maxSearchSeconds)来判断此窗口是否存在;

2、EditControl(searchFromControl)                 查找编辑位置,找到后可用DoubleClick()来改变电脑的focus;edit.SetValue("string")输入值;

3、Win32API.SendKeys("string")                      如果已在编辑位置,则可用此方法来输入值,{Ctrl}为ctrl键,其他类似;{@  8}格式可输入8个@,对于数字也可实现此功能,但对于字母不能...;

4、MenuItemControl(searchFromControl,Name)                   查找菜单按钮;

5、ComboBoxControl(searchFromControl,AutomationI)       查找下拉框,然后在此基础上用Select("name")方法来选择需要的选项;

6、BottonControl(searchFromControl,Name,SubName)        查找按钮;

7、automation.FindControl(firefoxWindow,

                           lambda c:(isinstance(c, automation.EditControl) or isinstance(c, automation.ComboBoxControl)) and c.Name == 'Enter your search term'

                           ) 按条件搜索handle

 

二、对找到句柄常用操作

Click()            点击;

RighClik()       右键点击;

SendKeys()     发送字符;

SetValue()      传值,一般对EditControl用;

 

三、对windows程序常用操作

subprocess.Popen('Name')    用进程打开程序;

window.Close()            关闭窗口;

window.SetActive()           使用;

window.SetTopMost()       设置为顶层

window.ShowWindow(uiautomation.ShowWindow.Maximize)  窗口最大化

window.CaptureToImage('Notepad.png')  截图;

 

uiautomation.Win32API.PressKey(uiautomation.Keys.VK_CONTROL)    按住Ctrl键

uiautomation.Win32API.ReleaseKey(uiautomation.Keys.VK_CONTROL) 释放Ctrl键

automation.GetConsoleWindow()      #return console window that runs python,打开控制台

automation.Logger.ColorfulWriteLine('\nI will open <Color=Green>Notepad</Color> and <Color=Yellow>automate</Color> it. Please wait for a while.')  控制台传值(彩色字体),普通传值用WriteLine;

automation.ShowDesktop() 显示桌面;

 

四、句柄的抓取

直接运行automation模块枚举窗口时,支持下列参数(从doc窗口运行automation.py程序 ):

-t intValue     延迟枚举时间,单位秒

-r                  从树的根部枚举,如果不指定,从当前窗口枚举

-d intValue    枚举控件树的的深度,如果不指定,枚举整个树

-f                  从焦点控件枚举,如果不指定,从当前窗口枚举

-c                  从光标下的控件枚举,如果不指定,从当前窗口枚举

-a                  获取光标下控件及其所有父控件

 

-n                 显示控件的完整Name, 如果不指定,只显示前30个字符

-m                显示控件更多属性,默认只显示控件的四个属性

示例:

automation.py c –t3            // 3秒后枚举当前窗口所有控件

automation.py c –d2 –t3 // 3秒后枚举当前窗口前三层控件

automation.py c –r –d1 –t0 -n // 0秒后从根部枚举前两层控件,并显示控件完整名称

automation.py c –c –t3 // 3秒后显示鼠标光标下面的控件信息

 



标签:控件,uiautomation,窗口,python,window,automation,枚举,API
From: https://blog.51cto.com/u_14181351/5951238

相关文章