前几天回归某款网游，发现重复任务太多，很想搞成自动操作，方便干其他事。
原来用在工作中的UI自动化主要也是网页web,手机端的自动化，按理来说原理都一样，通过定位元素，对它们进行操作。
于是我开始研究pywinauto,这是一个用python写的，对windows进行操作的库，加上spy++，通过线程号来找到对应程序。
# 方式一：创建应用程序时可以，指定应用程序的合适的backend，start方法中指定启动的应用程序
app = application.Application(backend='uia').start('notepad.exe') # start 参数可以是程序地址，通过cmd命令打开
# 方式二：查看要打开的程序进程号，通过process指定进程号连接
app = application.Application().connect(process=20456)
# 输入操作
edit.type_keys('柠檬')
# 键盘操作
from pywinauto.keyboard import send_keys
from pywinauto import mouse
send_keys('^a')
send_keys('^c')
send_keys('^v')
send_keys('{VK_RETURN}') # 回车
send_keys('^v')
# 鼠标操作
mouse.click(button='left', coords=(40, 40))
# 指定位置 鼠标右击
# mouse.click(button='right', coords=(100, 200))
# 3.2 鼠标双击
mouse.double_click(button='left', coords=(140, 40))
# 4 按下鼠标:press
# 将属性移动到（140，40）坐标处按下
mouse.press(button='left', coords=(140, 40))
# 5 释放鼠标:repleace
# 将鼠标移动到（300，40）坐标处释放，
mouse.release(button='left', coords=(300, 40))
# 6、右键单击指定坐标
mouse.right_click(coords=(400, 400))
# 7、鼠标中键单击指定坐标(很少用的到)
mouse.wheel_click(coords=(400, 400))
# 8 滚动鼠标
# coords:指定鼠标的坐标位置。
# wheel_dist指定鼠标滚轮滑动的次数，正数往上，负数往下。
mouse.scroll(coords=(1200, 300), wheel_dist=-3)
放上网上别人操作navcat的代码
import pywinauto
from pywinauto import mouse
from pywinauto.keyboard import send_keys
import day5
class NavicatTest:
def __init__(self, path=None, precess=None):
# 初始化一个应用程序对象
if path:
self.app = pywinauto.Application(backend="uia").start(path)
else:
self.app = pywinauto.Application(backend="uia").connect(process=precess)
# 选择主窗口
self.dlg = self.app["Navicat Premium"]
# print('test1')
# self.dlg.print_control_identifiers()
# # 将控件列表写入文件
# file_test1 = open('file_test1', mode='w')
# file_test1.write(content)
# file_test1.close()
def new_connect(self, title, host, port, user, password):
"""
新建连接
"""
# 选择菜单栏
menu = self.dlg["Menu"]
# print('test2')
# menu.print_control_identifiers()
# 点击文件
menu.child_window(title="文件", control_type="MenuItem").click_input()
# 点击新建连接
menu.item_by_path("文件->新建连接...").click_input()
# 选择新建连接窗口
new_dlg = self.app["新建连接"]
# 连接名称输入框
new_dlg["常规"].Edit5.type_keys(title)
# ip输入框
new_dlg["常规"].Edit1.type_keys(host)
# 端口输入框
new_dlg["常规"].Edit4.type_keys(port)
# 用户名输入框
new_dlg["常规"].Edit3.type_keys(user)
# 密码输入框
new_dlg["常规"].Edit2.type_keys(password)
# 点击确定按钮
new_dlg["确定"].click()
def open_connect(self, title):
"""
打开连接或者数据库
:param title: 连接名或者数据库名
:return:
"""
# 获取控制坐标中心点，进行点击，打开连接
db_name = self.dlg["TTreeView"].child_window(title=title, control_type="TreeItem")
rect = db_name.rectangle().mid_point()
print(rect.x, rect.y)
mouse.double_click(coords=(rect.x, rect.y))
def del_connect(self, title):
"""删除连接"""
# 获取控件中心点位置
db_name = self.dlg["TTreeView"].child_window(title=title, control_type="TreeItem")
rect = db_name.rectangle().mid_point()
# 鼠标在控件中心点，右击
mouse.right_click(coords=(rect.x, rect.y))
# 删除连接
self.app["上下文"]["MenuItem5"].click_input()
# 选择删除窗口
self.app["确认删除"]["删除"].click()
def close_coonnect(self, title):
"""
关闭连接或者数据库
:param title: 连接名或者数据库名
:return:
"""
# 获取控件中心点位置
db_name = self.dlg["TTreeView"].child_window(title=title, control_type="TreeItem")
rect = db_name.rectangle().mid_point()
# 鼠标在控件中心点，右击
mouse.right_click(coords=(rect.x, rect.y))
# 删除连接
self.app["上下文"]["MenuItem2"].click_input()
def del_database(self, database):
db_name = self.dlg["TTreeView"].child_window(title=database, control_type="TreeItem")
rect = db_name.rectangle().mid_point()
mouse.right_click(coords=(rect.x, rect.y))
self.app["上下文"]["MenuItem4"].click_input()
# 选择删除窗口
self.app["确认删除"]["删除"].click()
def new_database(self, title, database, charset="utf8 -- UTF-8 Unicode"):
"""新建数据库"""
db_name = self.dlg["TTreeView"].child_window(title=title, control_type="TreeItem")
rect = db_name.rectangle().mid_point()
mouse.right_click(coords=(rect.x, rect.y))
dlg = self.app["上下文"]
# 点击新建连接
dlg.MenuItem8.click_input()
# 获取新建连接的窗口
# self.app["新建数据库"].print_control_identifiers()
# 数据数据库名
self.app["新建数据库"]["常规"].Edit3.type_keys(database)
self.app["新建数据库"]["常规"].Edit2.type_keys(charset)
# 键盘回车键，点击确定
send_keys("{VK_RETURN}")
def new_find_dlg(self):
"""新建查询窗口"""
find = self.dlg["TTreeView"].child_window(title="查询", control_type="TreeItem")
# 获取查询的左边
rect = find.rectangle().mid_point()
# 鼠标右击
mouse.right_click(coords=(rect.x, rect.y))
# 选择出现的小窗口
dlg = self.app["上下文"]
# 点击新建连接
dlg.MenuItem1.click_input()
def find_sql(self, database, title, sql):
"""查询sql"""
title = "无标题 @{} ({}) - 查询".format(database, title)
find_dlg = self.app[title]
find_dlg["TabControl"].print_control_identifiers()
# 获取编辑框
edit = find_dlg["TabControl"].Pane4
# 获取编辑窗口控件位置
rect = edit.rectangle().mid_point()
mouse.click(coords=(rect.x, rect.y))
sql = "^a{}".format(sql.replace(" ", "{VK_SPACE}")) + ";"
send_keys(sql)
# 使用运行快捷键
send_keys("^r")
if __name__ == '__main__':
nav = NavicatTest(precess=5772)
# 新建连接
nav.new_connect(title="python666", host="localhost", port=3306, user="root", password="123456")
# 打开连接
nav.open_connect("win")
# 关闭连接
nav.close_coonnect("test")
# 打开数据库
nav.open_connect("test")
# 新建查询窗口
nav.new_find_dlg()
# 查询数据
sql = "SELECT * FROM students"
nav.find_sql("test", "win", sql)
# # 删除连接
nav.del_connect("localhost_3306"）
原理确实是一样的。
可问题来了，控件写满了几页，如何快速找到自己想要的控件呢？
像浏览器找元素一般都有调试模式，可windows程序如何类似的去找呢，一行行往下找效率太低了，只有几个操作还行。
wind.print_control_identifiers()，目前只有这个方法打印所有控件，呜呼...