python的gui编程,python的gui界面的编写

  python的gui编程,python的gui界面的编写

  这篇文章给大家带来了一些Python的知识,主要整理了PyAutoGUI相关的问题,PyAutoGUI是自动操作GUI的。桌面自动化就是将鼠标定位在桌面上,然后根据定位的位置执行相应的操作。下面就来看看吧,希望对你有帮助。

  【相关推荐:Python3视频教程】

  00-1010我们今天的英雄是pyautogui,这是一个纯Python的gui自动化工具。通过它,程序可以自动控制一系列的鼠标和键盘操作,达到自动化测试的目的。

  安装模块,打开cmd,输入:

  成功显示安装PyAutoGUI:成功安装PyTweening-1 . 0 . 4 mouse info-0 . 1 . 3 PyAutoGUI-0 . 9 . 53 PyGetWindow-0 . 0 . 9 Pymsgbox-1 . 0 . 9 PyPerclip-1 . 8 . 2 PyRect-0 . 2 . 0 pyscreee

  安装后可以直接使用。

  导包

  import pyautogui

GUI控制神器

鼠标操作

pyautogui . position()获取鼠标位置pyautogui . screen(x,y)确定坐标(x,y)是否在屏幕上,返回True,Flase。

  右上角带有(0,0)点的

鼠标信息

。最基本的桌面操作是鼠标操作。我们可以控制鼠标的移动:

  Autogui。moveto (x,y)在绝对位置移动,移动到x,移动到ypyautogui的相对位置。Moveel (x,y),从当前位置移动#移动鼠标

  pyautogui.moveTo(200,400,持续时间=2)

  皮格。Moverel (200,500,duration=2)整个桌面的左上角是坐标轴的原点,所有的操作都用这个原点来确定操作位置。

  第一行是将鼠标移动到指定的像素(200,400)位置;

  第二行代码是根据当前点将鼠标向右移动200px,向下移动500px。

  两行代码中有一个共同的参数duration,表示移动的时间,即在规定的时间内完成移动操作,单位是秒。

  运行这两行代码,观察屏幕鼠标的变化,是不是很神奇?

  00-1010通常我们的鼠标有左右按键,高级鼠标中间有一个按键。

  我的鼠标只有两个按键,中间没有按键。唉~pyautogui对这三个按钮操作都有相应的处理:

  pyautogui.click()

  (100,100,点击次数=2,间隔=0.5,按钮=右,持续时间=0.2)

  位置,点击次数,间隔时间,右键(默认左键),移动间隔左:左键右:右中:中键#鼠标点击,默认左键

  pyautogui.click(100,100)

  #单击左边的按钮

  pyautogui.click(100,100,button=left )

  #右键单击

  pyautogui.click(100,300,button=right )

  #点击中间

  Pygui.click (100,300,button= middle )用鼠标点击。如果不指定button参数,默认是单击左键。前两个参数是单击坐标的位置。

  运行这段代码,看看你的桌面会发生什么?

  除了鼠标点击操作,还有双击操作:

  Pyautogui.doubleClick() #双击右键单击pyautogui.leftClick() #双击左键单击pyautogui.middleClick() #双击中键单击pyautogui.tripleClick() #双击屏幕#双击左键单击

  pyautogui.doubleClick(10,10)

  #双击

  pyautogui.rightClick(10,10)

  #双击中间的按钮

  pyautogui.middleClick(10,10)

  # 双击屏幕

  pyautogui.tripleClick(10,10)操作函数也很简单,相信大家一眼就能看明白,如果一眼看不明白,请多看几眼!

  熟悉前端的小伙伴可能会马上联想到,鼠标操作有按下和释放的过程,我们屏幕操作也有对应的控制:

  

鼠标点击与释放

  • pyautogui.mouseUp() #释放
  • pyautogui.mouseDown() #点击 只需要输入键就可
# 鼠标按下

  pyautogui.mouseDown()

  # 鼠标释放

  pyautogui.mouseUp()

鼠标拖动

  • pyautogui.dragTo() #绝对位置拖动
  • pyautogui.dragRel() #相对位置拖动
    例:pyautogui.dragRel(-100,200,duration=0.5,button=‘right’)
我们可以控制鼠标拖动到指定坐标位置,并且设置操作时间和按键:

  

pyautogui.dragTo(100,300,duration=1,button='right')
这个运行效果和前面移动类似。

  根据前面移动的经验,我们也有按照方向拖动鼠标:

  

pyautogui.dragRel(100,300,duration=4,button='left')

鼠标滚动

在桌面操作中,我们有时候需要滚动鼠标到达向上或者向下的位置,这时候我们可以使用 scroll 这个函数来控制:

  

  • pyautogui.scroll() #(,x,y) 滑动距离(+上 , -下),位置
pyautogui.scroll(30000)
参数是整数,表示向上或向下滚动多少个单位,这个单位根据不同的操作系统可能不一样。如果向上滚动,传入正整数,向下滚动传入负整数。

  

键盘操作

键盘控制

  • pyautogui.keyDown() #模拟按键放下,内容为按键符
  • pyautogui.keyUp() #模拟按键松开
  • pyautogui.press() #模拟一次按键过程,即keyDown和keyUP的组合
  • pyautogui.hotkey() #press一样 区别:可以组合按键
  • pyautogui.typewrite() #模拟键盘输出内容
举个例子,大家平时输入感叹号(!)是怎么操作键盘的?

  按住 shift 按键,然后再按住 1 按键,就可以了。用pyautogui控制就是:

  

pyautogui.keyDown('shift') 

  pyautogui.press('1')

  pyautogui.keyUp('shift')

运行上面的代码,如果你的鼠标是放在编辑框中,你会得到一个感叹号!

  我们还可以直接输出内容:

  

pyautogui.typewrite('python', 1)
第一个参数是输出的内容,第二个参数是间隔时间,单位是秒。

  运行上面代码,你的编辑器里面就会每隔1秒钟按顺序输出 python 的6个字母。

  

特殊符号

有时我们需要输入键盘的一些特殊的符号按键,比如 换行、方向键等,这些有相对应的键盘字符串表示:

  

pyautogui.typewrite(['p','y','t','h','o','n','enter']) 

  pyautogui.typewrite(['p','y','t','h','o','n',' '])

运行上面代码,编辑器里面就会输出 python 之后换行。

  其他特殊按键对应的字符串请参考官方说明。

  

快捷键

如果我要复制一个内容,大部分情况下会使用快键键 ctrl + c,按照上面讲的,我们应该这么实现:

  

pyautogui.keyDown('ctrl')

  pyautogui.keyDown('c')

  pyautogui.keyUp('c')

  pyautogui.keyUp('ctrl')

实现的效果和上面的4行代码相同。

  

键盘字符串 说明
enter(或return 或 \n) 回车
esc ESC键
shiftleft, shiftright 左右SHIFT键
altleft, altright 左右ALT键
ctrlleft, ctrlright 左右CTRL键
tab (\t) TAB键
backspace, delete BACKSPACE 、DELETE键
pageup, pagedown PAGE UP 和 PAGE DOWN键
home, end HOME 和 END键
up, down, left,right 箭头键
f1, f2, f3…. f12 F1…….F12键
volumemute, volumedown,volumeup 声音变大变小静音(有些键盘没有)
pause PAUSE键,暂停键
capslock CAPS LOCK 键
numlock NUM LOCK 键
scrolllock SCROLLLOCK 键
insert INSERT键
printscreen PRINT SCREEN键
winleft, winright Win键(windows )
command command键(Mac OS X )
option option(Mac OS X)

  

屏幕处理

获取屏幕截屏

我们先来假设一个场景:我现在要在屏幕上找到一个红色的点,你会怎么做?通常的做法是拿到这个红色点的颜色值,然后再对屏幕上的点逐个进行比较,直到找到为止。

  pyautogui 为我们这个操作场景提供了支持,分别有三个函数可以完成这三件事情。

  

  • img = pyautogui.screenshot() #默认是全屏,可是输入截屏大小
  • img.save(‘img.jpg’)
  • pyautogui.screenshot(‘image’,region=(x,y,w,h) # 返回屏幕的截图,是一个Pillow的image对象
  • pyautogui.pixelMatchesColor(500,500,(12,120,400)) # 是一个对比函数,对比的是屏幕上(500,500)这一点像素的颜色,与所给的元素是否相同;
  • pyautogui.locateCenterOnScreen(‘image’, region=(x,y,w,h) ) #图片匹配功能,查找image图片在屏幕中的位置,region限制查找范围
im = pyautogui.screenshot()

  im.save('screenshot.png')

  rgb = im.getpixel((100, 500))

  print(rgb)

  match = pyautogui.pixelMatchesColor(500,500,(12,120,400))

  print(match)

第一个是获取屏幕截图函数,它可以返回一个 Pillow 的 image 对象; 第二个是获取屏幕截图中指定坐标点的颜色,返回 rgb 颜色值;第三个是将指定坐标点的颜色和目标的颜色进行比对,返回布尔值。

  我们再来升级一下需求:

  我现在要在屏幕上找到 edge 浏览器的图标,你会怎么做?

  通常的做法是先知道 edge 浏览器的图标长啥样,是绿色还是蓝色,是胖的还是瘦的,对吧?然后再在屏幕上去进行图标的匹配,直到找到一个图标跟我们目标图标一样,就得到了结果。

  于是,我们的代码如下:

  

# 图像识别(一个)

  oneLocation = pyautogui.locateOnScreen('1.png')

  print(oneLocation)

  # 图像识别(多个)

  allLocation = pyautogui.locateAllOnScreen('1.png')

  print(list(allLocation))

你可以在桌面上将某个应用的图标截取下来,保存为图片,然后使用上面几行代码来识别,识别成功,你会返回类似下面的结果:

  

Box(left=20, top=89, width=33, height=34)

  [Box(left=20, top=89, width=33, height=34)]

这就是图片在桌面的位置,如果找不到图片,就会返回 None。

  

信息框

当你在模拟一个桌面操作的时候,如果有分支操作需要根据实际情况来判断,你是不是需要有一个地方可以让你选择走哪个分支?

  pyautogui 贴心地考虑到了这种情况,你可以通过弹出一个选择框来中断当前的操作,选择操作分支。

  

  • pyautogui.alert(text=,title=,button=) #按钮框 文本,标题,按钮名
  • pyautogui.confirm(text=,title=,buttons=) #组合按钮框(多个按钮)
  • pyautogui.prompt(text=,title=,default=) #输入框 #文本,标题,默认文字
  • pyautogui.password(text=,title=,default=,mask=) #密码输入框 #输入框 #文本,标题,默认文字,掩码样式
  • pyautogui.mouseInfo() #获取鼠标的信息
way = pyautogui.confirm('领导,该走哪条路?', buttons=['农村路', '水路', '陆路'])

  print(way)

这里就是我们 HTML 页面的 confirm 选择框,选择了选项之后,我们可以获取到选择的选项,然后基于这个选项做判断,进入相应的操作分支。

  除了选择确认框之外,还有其他一些提示信息框:

  

# 警告框

  alert = pyautogui.alert(text='警告!敌军来袭!', title='警告框')

  print(alert)

  # 密码框

  password = pyautogui.password('请输入密码')

  print(password)

  # 普通输入框

  input = pyautogui.prompt('请输入指令:')

  print(input)

pyautogui 的基本知识就给大家介绍到这里,这个 python 模块的功能十分强大,函数都非常简单,对 python 初学者比较友好。学了这些基本知识之后,你可以运用这些基本知识的组合,去实现一些有趣的桌面自动化操作,快去尝试一把吧!

  

自动点赞实战

我们通过今天的基础知识的学习,我们可以通过pyautogui+PIL结合来实现网页自动点赞的实战练习。

  

我们先介绍一个PIL库下一个裁剪图片的函数crop。

  使用PIL裁切图片使用PIL需要引用Image,使用Image的open(file)方法可以返回打开的图片,使用crop((x1,y1,x2,y2))方法可以对图片做裁切。
该区域是一个元组,(x1,y1)是图片左上角的坐标,(x2,y2)是图片右下角的坐标。
Python Imaging Library 使用左上角为 (0, 0)的坐标系统。

  首先我们要知道点赞的图片的样子

  

# 截取整个屏幕

  im=pyautogui.screenshot()

  # 截取点赞图片

  om=im.crop((1754,595,1803,631))

  #将图片保存供pyautogui.locateOnScreen()使用

  om.save("dianzan.png")

根据截取的屏幕仅截取带赞的手势图片,可以用pyautogui.mouseInfo()获取图片的位置(1754,595,1803,631)
或者通过pyautogui.location()来确定首尾坐标

  

在当前目录下得到如下图片。

  

# 点赞函数

  def zan(count): #为了防止一直运行下去,点赞次数由自己定义

   time.sleep(0.5)

   # 寻找刚才保存点赞手势图片

   xy = pyautogui.locateOnScreen('dianzan.png')

   # 寻找图片的中心

   center = pyautogui.center(xy)

   # 点赞

   pyautogui.click(center)

   print('点赞成功')

  count = 3 # 点赞次数

  while range(count):

   if pyautogui.locateOnScreen('dianzan.png'):

   zan(count) # 调用点赞函数

   count-=1

   else:

   #本页没有图片后,滚动鼠标;

   pyautogui.scroll(-500)

   print('没有找到目标,屏幕下滚~')

   count -= 1

  print('点赞结束!')

未点赞之前的图片是这样的:

  自动点赞之后:

是不是很厉害呢?其实pyautogui还可以做很多东西,比如说自动发信息,其原理还是不变的,找到对应的位置,输入内容,发送就可以了,在这里我就不演示啦!有兴趣的可以去试试哦~~~

  完整代码

  

from PIL import Image

  import pyautogui

  import time

  # 截取整个屏幕

  im=pyautogui.screenshot()

  # 截取点赞图片

  om=im.crop((1754,595,1803,631))

  #将图片保存供pyautogui.locateOnScreen()使用

  om.save("dianzan.png")

  # 点赞函数

  def zan(count): #为了防止一直运行下去,点赞次数由自己定义

   time.sleep(0.5)

   # 寻找刚才保存点赞手势图片

   xy = pyautogui.locateOnScreen('dianzan.png')

   # 寻找图片的中心

   center = pyautogui.center(xy)

   # 点赞

   pyautogui.click(center)

   print('点赞成功')

  count = 3 # 点赞次数

  while range(count):

   if pyautogui.locateOnScreen('dianzan.png'):

   zan(count) # 调用点赞函数

   count-=1

   else:

   #本页没有图片后,滚动鼠标;

   pyautogui.scroll(-500)

   print('没有找到目标,屏幕下滚~')

   count -= 1

  print('点赞结束!')

【相关推荐:Python3视频教程 】以上就是完全掌握Python自动操作GUI之PyAutoGUI的详细内容,更多请关注盛行IT软件开发工作室其它相关文章!

  

郑重声明:本文由网友发布,不代表盛行IT的观点,版权归原作者所有,仅为传播更多信息之目的,如有侵权请联系,我们将第一时间修改或删除,多谢。

留言与评论(共有 条评论)
   
验证码: