python的gui编程,python的gui界面的编写
这篇文章给大家带来了一些Python的知识,主要整理了PyAutoGUI相关的问题,PyAutoGUI是自动操作GUI的。桌面自动化就是将鼠标定位在桌面上,然后根据定位的位置执行相应的操作。下面就来看看吧,希望对你有帮助。
【相关推荐:Python3视频教程】
00-1010我们今天的英雄是pyautogui,这是一个纯Python的gui自动化工具。通过它,程序可以自动控制一系列的鼠标和键盘操作,达到自动化测试的目的。
安装模块,打开cmd,输入:
成功显示安装PyAutoGUI:成功安装PyTweening-1 . 0 . 4 mouse info-0 . 1 . 3 PyAutoGUI-0 . 9 . 53 PyGetWindow-0 . 0 . 9 Pymsgbox-1 . 0 . 9 PyPerclip-1 . 8 . 2 PyRect-0 . 2 . 0 pyscreee
安装后可以直接使用。
导包
import pyautogui
GUI控制神器
鼠标操作
pyautogui . position()获取鼠标位置pyautogui . screen(x,y)确定坐标(x,y)是否在屏幕上,返回True,Flase。右上角带有(0,0)点的
鼠标信息
。最基本的桌面操作是鼠标操作。我们可以控制鼠标的移动:Autogui。moveto (x,y)在绝对位置移动,移动到x,移动到ypyautogui的相对位置。Moveel (x,y),从当前位置移动#移动鼠标
pyautogui.moveTo(200,400,持续时间=2)
皮格。Moverel (200,500,duration=2)整个桌面的左上角是坐标轴的原点,所有的操作都用这个原点来确定操作位置。
第一行是将鼠标移动到指定的像素(200,400)位置;
第二行代码是根据当前点将鼠标向右移动200px,向下移动500px。
两行代码中有一个共同的参数duration,表示移动的时间,即在规定的时间内完成移动操作,单位是秒。
运行这两行代码,观察屏幕鼠标的变化,是不是很神奇?
00-1010通常我们的鼠标有左右按键,高级鼠标中间有一个按键。
我的鼠标只有两个按键,中间没有按键。唉~pyautogui对这三个按钮操作都有相应的处理:
pyautogui.click()
(100,100,点击次数=2,间隔=0.5,按钮=右,持续时间=0.2)
位置,点击次数,间隔时间,右键(默认左键),移动间隔左:左键右:右中:中键#鼠标点击,默认左键
pyautogui.click(100,100)
#单击左边的按钮
pyautogui.click(100,100,button=left )
#右键单击
pyautogui.click(100,300,button=right )
#点击中间
Pygui.click (100,300,button= middle )用鼠标点击。如果不指定button参数,默认是单击左键。前两个参数是单击坐标的位置。
运行这段代码,看看你的桌面会发生什么?
除了鼠标点击操作,还有双击操作:
Pyautogui.doubleClick() #双击右键单击pyautogui.leftClick() #双击左键单击pyautogui.middleClick() #双击中键单击pyautogui.tripleClick() #双击屏幕#双击左键单击
pyautogui.doubleClick(10,10)
#双击
pyautogui.rightClick(10,10)
#双击中间的按钮
pyautogui.middleClick(10,10)
# 双击屏幕
pyautogui.tripleClick(10,10)操作函数也很简单,相信大家一眼就能看明白,如果一眼看不明白,请多看几眼!
熟悉前端的小伙伴可能会马上联想到,鼠标操作有按下和释放的过程,我们屏幕操作也有对应的控制:
鼠标点击与释放
- pyautogui.mouseUp() #释放
- pyautogui.mouseDown() #点击 只需要输入键就可
# 鼠标按下pyautogui.mouseDown()
# 鼠标释放
pyautogui.mouseUp()
鼠标拖动
- pyautogui.dragTo() #绝对位置拖动
- pyautogui.dragRel() #相对位置拖动
例:pyautogui.dragRel(-100,200,duration=0.5,button=‘right’)
pyautogui.dragTo(100,300,duration=1,button='right')这个运行效果和前面移动类似。
根据前面移动的经验,我们也有按照方向拖动鼠标:
pyautogui.dragRel(100,300,duration=4,button='left')
鼠标滚动
在桌面操作中,我们有时候需要滚动鼠标到达向上或者向下的位置,这时候我们可以使用scroll
这个函数来控制:
- pyautogui.scroll() #(,x,y) 滑动距离(+上 , -下),位置
pyautogui.scroll(30000)参数是整数,表示向上或向下滚动多少个单位,这个单位根据不同的操作系统可能不一样。如果向上滚动,传入正整数,向下滚动传入负整数。
键盘操作
键盘控制
- pyautogui.keyDown() #模拟按键放下,内容为按键符
- pyautogui.keyUp() #模拟按键松开
- pyautogui.press() #模拟一次按键过程,即keyDown和keyUP的组合
- pyautogui.hotkey() #press一样 区别:可以组合按键
- pyautogui.typewrite() #模拟键盘输出内容
按住 shift 按键,然后再按住 1 按键,就可以了。用pyautogui
控制就是:
pyautogui.keyDown('shift')运行上面的代码,如果你的鼠标是放在编辑框中,你会得到一个感叹号!pyautogui.press('1')
pyautogui.keyUp('shift')
我们还可以直接输出内容:
pyautogui.typewrite('python', 1)第一个参数是输出的内容,第二个参数是间隔时间,单位是秒。
运行上面代码,你的编辑器里面就会每隔1秒钟按顺序输出 python 的6个字母。
特殊符号
有时我们需要输入键盘的一些特殊的符号按键,比如 换行、方向键等,这些有相对应的键盘字符串表示:
pyautogui.typewrite(['p','y','t','h','o','n','enter'])运行上面代码,编辑器里面就会输出 python 之后换行。pyautogui.typewrite(['p','y','t','h','o','n',' '])
其他特殊按键对应的字符串请参考官方说明。
快捷键
如果我要复制一个内容,大部分情况下会使用快键键 ctrl + c,按照上面讲的,我们应该这么实现:
pyautogui.keyDown('ctrl')实现的效果和上面的4行代码相同。pyautogui.keyDown('c')
pyautogui.keyUp('c')
pyautogui.keyUp('ctrl')
键盘字符串 说明
enter(或return 或 \n) 回车
esc ESC键
shiftleft, shiftright 左右SHIFT键
altleft, altright 左右ALT键
ctrlleft, ctrlright 左右CTRL键
tab (\t) TAB键
backspace, delete BACKSPACE 、DELETE键
pageup, pagedown PAGE UP 和 PAGE DOWN键
home, end HOME 和 END键
up, down, left,right 箭头键
f1, f2, f3…. f12 F1…….F12键
volumemute, volumedown,volumeup 声音变大变小静音(有些键盘没有)
pause PAUSE键,暂停键
capslock CAPS LOCK 键
numlock NUM LOCK 键
scrolllock SCROLLLOCK 键
insert INSERT键
printscreen PRINT SCREEN键
winleft, winright Win键(windows )
command command键(Mac OS X )
option option(Mac OS X)
屏幕处理
获取屏幕截屏
我们先来假设一个场景:我现在要在屏幕上找到一个红色的点,你会怎么做?通常的做法是拿到这个红色点的颜色值,然后再对屏幕上的点逐个进行比较,直到找到为止。 pyautogui
为我们这个操作场景提供了支持,分别有三个函数可以完成这三件事情。
- img = pyautogui.screenshot() #默认是全屏,可是输入截屏大小
- img.save(‘img.jpg’)
- pyautogui.screenshot(‘image’,region=(x,y,w,h) # 返回屏幕的截图,是一个Pillow的image对象
- pyautogui.pixelMatchesColor(500,500,(12,120,400)) # 是一个对比函数,对比的是屏幕上(500,500)这一点像素的颜色,与所给的元素是否相同;
- pyautogui.locateCenterOnScreen(‘image’, region=(x,y,w,h) ) #图片匹配功能,查找image图片在屏幕中的位置,region限制查找范围
im = pyautogui.screenshot()第一个是获取屏幕截图函数,它可以返回一个 Pillow 的 image 对象; 第二个是获取屏幕截图中指定坐标点的颜色,返回 rgb 颜色值;第三个是将指定坐标点的颜色和目标的颜色进行比对,返回布尔值。im.save('screenshot.png')
rgb = im.getpixel((100, 500))
print(rgb)
match = pyautogui.pixelMatchesColor(500,500,(12,120,400))
print(match)
我们再来升级一下需求:
我现在要在屏幕上找到 edge 浏览器的图标,你会怎么做?
通常的做法是先知道 edge 浏览器的图标长啥样,是绿色还是蓝色,是胖的还是瘦的,对吧?然后再在屏幕上去进行图标的匹配,直到找到一个图标跟我们目标图标一样,就得到了结果。
于是,我们的代码如下:
# 图像识别(一个)你可以在桌面上将某个应用的图标截取下来,保存为图片,然后使用上面几行代码来识别,识别成功,你会返回类似下面的结果:oneLocation = pyautogui.locateOnScreen('1.png')
print(oneLocation)
# 图像识别(多个)
allLocation = pyautogui.locateAllOnScreen('1.png')
print(list(allLocation))
Box(left=20, top=89, width=33, height=34)这就是图片在桌面的位置,如果找不到图片,就会返回 None。[Box(left=20, top=89, width=33, height=34)]
信息框
当你在模拟一个桌面操作的时候,如果有分支操作需要根据实际情况来判断,你是不是需要有一个地方可以让你选择走哪个分支? pyautogui
贴心地考虑到了这种情况,你可以通过弹出一个选择框来中断当前的操作,选择操作分支。
- pyautogui.alert(text=,title=,button=) #按钮框 文本,标题,按钮名
- pyautogui.confirm(text=,title=,buttons=) #组合按钮框(多个按钮)
- pyautogui.prompt(text=,title=,default=) #输入框 #文本,标题,默认文字
- pyautogui.password(text=,title=,default=,mask=) #密码输入框 #输入框 #文本,标题,默认文字,掩码样式
- pyautogui.mouseInfo() #获取鼠标的信息
way = pyautogui.confirm('领导,该走哪条路?', buttons=['农村路', '水路', '陆路'])这里就是我们 HTML 页面的 confirm 选择框,选择了选项之后,我们可以获取到选择的选项,然后基于这个选项做判断,进入相应的操作分支。print(way)
除了选择确认框之外,还有其他一些提示信息框:
# 警告框alert = pyautogui.alert(text='警告!敌军来袭!', title='警告框')
print(alert)
# 密码框
password = pyautogui.password('请输入密码')
print(password)
# 普通输入框
input = pyautogui.prompt('请输入指令:')
print(input)
pyautogui
的基本知识就给大家介绍到这里,这个 python 模块的功能十分强大,函数都非常简单,对 python 初学者比较友好。学了这些基本知识之后,你可以运用这些基本知识的组合,去实现一些有趣的桌面自动化操作,快去尝试一把吧!
自动点赞实战
我们通过今天的基础知识的学习,我们可以通过我们先介绍一个PIL库下一个裁剪图片的函数crop。pyautogui
+PIL
结合来实现网页自动点赞的实战练习。
使用PIL裁切图片使用PIL需要引用Image,使用Image的open(file)方法可以返回打开的图片,使用crop((x1,y1,x2,y2))
方法可以对图片做裁切。
该区域是一个元组,(x1,y1)
是图片左上角的坐标,(x2,y2)
是图片右下角的坐标。
Python Imaging Library 使用左上角为 (0, 0)的坐标系统。
首先我们要知道点赞的图片的样子
# 截取整个屏幕im=pyautogui.screenshot()
# 截取点赞图片
om=im.crop((1754,595,1803,631))
#将图片保存供pyautogui.locateOnScreen()使用
om.save("dianzan.png")
根据截取的屏幕仅截取带赞的手势图片,可以用在当前目录下得到如下图片。pyautogui.mouseInfo()
获取图片的位置(1754,595,1803,631)
或者通过pyautogui.location()来确定首尾坐标
# 点赞函数未点赞之前的图片是这样的:def zan(count): #为了防止一直运行下去,点赞次数由自己定义
time.sleep(0.5)
# 寻找刚才保存点赞手势图片
xy = pyautogui.locateOnScreen('dianzan.png')
# 寻找图片的中心
center = pyautogui.center(xy)
# 点赞
pyautogui.click(center)
print('点赞成功')
count = 3 # 点赞次数
while range(count):
if pyautogui.locateOnScreen('dianzan.png'):
zan(count) # 调用点赞函数
count-=1
else:
#本页没有图片后,滚动鼠标;
pyautogui.scroll(-500)
print('没有找到目标,屏幕下滚~')
count -= 1
print('点赞结束!')
自动点赞之后:
是不是很厉害呢?其实pyautogui
还可以做很多东西,比如说自动发信息,其原理还是不变的,找到对应的位置,输入内容,发送就可以了,在这里我就不演示啦!有兴趣的可以去试试哦~~~
完整代码
from PIL import Image【相关推荐:Python3视频教程 】以上就是完全掌握Python自动操作GUI之PyAutoGUI的详细内容,更多请关注盛行IT软件开发工作室其它相关文章!import pyautogui
import time
# 截取整个屏幕
im=pyautogui.screenshot()
# 截取点赞图片
om=im.crop((1754,595,1803,631))
#将图片保存供pyautogui.locateOnScreen()使用
om.save("dianzan.png")
# 点赞函数
def zan(count): #为了防止一直运行下去,点赞次数由自己定义
time.sleep(0.5)
# 寻找刚才保存点赞手势图片
xy = pyautogui.locateOnScreen('dianzan.png')
# 寻找图片的中心
center = pyautogui.center(xy)
# 点赞
pyautogui.click(center)
print('点赞成功')
count = 3 # 点赞次数
while range(count):
if pyautogui.locateOnScreen('dianzan.png'):
zan(count) # 调用点赞函数
count-=1
else:
#本页没有图片后,滚动鼠标;
pyautogui.scroll(-500)
print('没有找到目标,屏幕下滚~')
count -= 1
print('点赞结束!')
郑重声明:本文由网友发布,不代表盛行IT的观点,版权归原作者所有,仅为传播更多信息之目的,如有侵权请联系,我们将第一时间修改或删除,多谢。