Python RPA自动化机器人模拟鼠标键盘

软件发布|下载排行|最新软件

当前位置:首页IT学院IT技术

Python RPA自动化机器人模拟鼠标键盘

代码写注释   2023-03-21 我要评论

RPA,全称为Robotic Process Automation,即机器人流程自动化。

我们可以利用RPA技术将工作中可重复的部分流程化,让机器替我们完成这一工作。

许多程序并不提供方便的接口,我们难以直接通过脚本来批量完成工作任务。

PyAutoGUl允许我们使用Python脚本来控制鼠标和键盘以自动与其他应用程序交互,我们可以用这个库来记录我们的键鼠操作,从而使得计算机像人一样去使用那些应用程序,使人们从繁琐的重复性工作中抽离出来。

我们一起来了解一下PyAutoGUI库的安装及其使用方法。

1. PyAutoGUI库的安装

1.1 系统环境

操作系统:win10 64位

Python版本:Python 3.7.0及其以上

1.2 安装参考

1、使用pip进行安装,pip install pyautogui

使用pip方式安装PyAutoGUI库。

#创建虚拟环境
mkvirtualenv -p python3.10 PythonRPA
#进入虚拟环境
workon PythonRPA
pip install pyautogui
pip list

2、下载后安装

手动下载进行安装,

进入网址:传送门,点Download files,下载右侧的PyAutoGUI-0.9.38.tar.gz

3、检测安装是否成功

python
import pyautogui

2.鼠标控制函数

在日常生活中经常使用的鼠标动作,都可以使用PyAutoGUI库中的函数来模拟,

那么一起来了解下鼠标坐标的定义及一些鼠标控制函数。

2.1 屏幕分辨率和鼠标位置

先来了解一下鼠标坐标的定义。

PyAutoGUI会获取我们的屏幕大小信息,之后以屏幕的左上角为坐标原点,从坐标原点向右为x轴,从零开始递增;

从坐标原点向下为y轴,从零开始递增。

最左上角的像素点坐标为(0,0)。

如果屏幕分辨率为1920×1080,则最右下角的像素点将为(1919,1079)(因为坐标从0开始而不是1)

我们可以用函数获取屏幕分辨率大小以及鼠标当前坐标:

#屏幕分辨率大小由size()函数作为两个整数的元组返回
pyautogui.size()
#鼠标光标的当前X和Y坐标由position()函数返回
print(pyautogui.position())

此外,也可以通过一些外部软件获取鼠标坐标,如微信的截图功能:

登陆微信后按下 ctrl+a,

鼠标右侧就会展示出当前坐标。

2.2 控制鼠标移动

pyautogui.moveTo([1392,47],duration=1)

此种方式无论鼠标的当前位置在哪,都控制鼠标移动到屏幕坐标轴的(x,y)=(1392,47)的位置上。

pyautogui.moveRel([20,30],duration=1)

而此种方式则先要获取鼠标的当前位置,然后在此位置的基础上向右移动20个像素,向下移动30个像素。

而另一个参数“duration”规定鼠标移动到目标位置所需要的时间,我们会看到鼠标在规定时间内逐渐移动到目标位置,就像我们真正在手动移动鼠标一样。

2.3 控制鼠标点击

我们可以简单的调用click()函数来完成点击,这样会直接使鼠标在当前位置单击鼠标左键一次:

pyautogui.click()

如果想要在特定坐标点单击鼠标,可以用下面的方式,这样就不用再先行移动鼠标:

pyautogui.click([566,193])

在鼠标点击中,有一些值得注意的参数:

参数可选值简介
buttonleft, right, middle决定由鼠标左键、右键、还是滚轮来执行点击操作
clicks整数决定鼠标点击次数
interval数字与clicks搭配使用,决定每次鼠标点击事件的间隔时间

我们也可以完成对点击动作的分解,“mouseDown”即表示按下鼠标的动作,而”mouseUp”表示抬起鼠标的动作。

pyautogui.mouseDown(button='left', x=243, y=637)
pyautogui.moveTo([707,669],duration = 1)
pyautogui.mouseUp(button='left', x=707, y=669)

另外,其他鼠标点击事件的控制代码如下所示,我们可以直接调用这些函数,以减少大量添加描述参数:

pyautogui.doubleclick()  #控制双击鼠标左键
pyautogui.rightClick()   #控制单击鼠标右键
pyautogui.middleclick()  #控制单击鼠标滚轮键

2.4 控制鼠标滚动

通过scroll()函数,我们可以模仿鼠标滚轮的滑动。

pyautogui.scroll(num)

其中num的取值范围是任意整数,num取正数表示滚轮向上滑动,而取负数=数表示滚轮向下滑动。

2.5 控制鼠标拖动

我们还常常需要用鼠标选中一段区域,这时我们就需要用到控制鼠标拖动功能。

pyautogui.moveTo([237,890],duration = 0.5)
pyautogui.dragTo([873,951], duration = 1)
pyautogui.moveTo([237,890],duration = 0.5)
pyautogui.dragRel([20,30],duration = 1)

此种方式和前面控制鼠标移动的原理相同,共有两种控制鼠标拖动的方式,

第一种是控制鼠标拖动到[873,951]坐标位置,

第二种是以当前鼠标位置为起点,向右拖动20个像素的距离,向下拖动30个像素的距离。

“duration”参数依然控制鼠标移动的时间。

“button”等参数仍然适用在这里。

3. 控制键盘

类似的,我们也可以用PyAutoGUI库来模拟键盘输入。

3.1 控制键盘按键

pyautogui.press('a')
pyautogui.press('space')

代码输入参数表示要控制键盘按下键的键值,单独输入字母,如’a’,就相当于按下键盘上的’a’键,一些常用的快捷键列举如下:

按键说明
enter(或return 或 \n)回车
escESC键
shiftleft,shiftright左右SHIFT键
altleft, altright左右ALT键
ctrlleft,ctrlright左右CTRL键
tab (t)TAB键
backspace, deleteBACKSPACE、DELETE键
pageup, pagedownPAGEUP和PAGE DOWN键

3.2 控制键盘输入

pyautogui.typewrite(string)

如果为了输入一段内容,可以表示键盘输入一段字符串内容,如当string的值为‘l love pyautogui’,就表示通过键盘输入一串字符串内容。

例如:

pyautogui.typewrite('l love pyautogui')

“interval”参数可以用来控制每个按键按下间隔的时间。

给参数加上中括号 [],参数string表示键盘上按键的名称,就取代了前面的press方法,同样可以实现控制键盘按键功能。

pyautogui.typewrite([string])

要注意的是:此方法可以写入英文和数字,但是并不能够写入中文。

3.3 键盘快捷键

pass

3.4 解决键盘输入中文问题

按照正常的输入逻辑,输入中文需要使用输入法输入拼音,再选中需要的正确字符,这样的操作显然太过繁琐。我们可以使用一些库向系统剪切板中写入中文,再调用热键进行粘贴。

操作剪贴板的常见库有win32clipboard和pyperclip两种,我们都可以尝试使用,都很方便。

唯一的区别点可能是pyperclip在打包为exe时,文件体积会更大。

pyperclip:

# -*- coding: utf8 -*-
import pyperclip
import pyautogui
#Python 2 版本pyperclip提供中文复制
#可以把pyperclip的写入与粘贴快捷键封装为一个函数
def paste(foo):
  pyperclip.copy(foo)
  pyautogui.hotkey('ctrl', 'v')
#写入一行文字
foo = u'学而时习之'
#移动到文本框
pyautogui.click(442, 348)
#进行粘贴
paste(foo)

win32clipboard :

注意,要先安装pywin32,win32clipboard包含在其中

pip install pywin32

案例代码:

# -*- coding: utf8 -*-
import pyautogui
import win32clipboard as w
import win32con
#获取剪切板内容
def gettext():
    w.OpenClipboard()
    t = w.GetClipboardData(win32con.CF_TEXT)
    w.CloseClipboard()
    return t
#写入剪切板内容
def settext(aString):
    w.OpenClipboard()
    w.EmptyClipboard()
    w.SetClipboardData(win32con.CF_TEXT, aString)
    w.CloseClipboard()
#写入中文字
a="我们中国滴汉字CSDN搜代码写注释"
#对中文进行转码,否则会出现乱码
settext(a.encode('gbk')) #这边得编码一下,否则复制出来是乱码的
#移动到文本框
pyautogui.click(442, 348)
#进行粘贴
pyautogui.hotkey('ctrl', 'v')

值得注意的是,用win32clipboard将中文写入剪贴板,需要先进行转码,否则会有乱码出现。

Copyright 2022 版权所有 软件发布 访问手机版

声明:所有软件和文章来自软件开发商或者作者 如有异议 请与本站联系 联系我们