Pythonを使用したマウスとキーボードの自動化？

このセクションでは、Pythonのpyautoguiモジュールを使用して、マウスとキーボードの動きを自動化しようとします。

Pyautoguiは、マウスとキーボードを制御してさまざまなことを実行できるようにするライブラリです。

これは、人間向けのクロスプラットフォームのGUI自動化Pythonモジュールです。

サードパーティのライブラリなので、インストールする必要があります。

pip install pyautogui

マウス

以下は、マウスの動きを自動化するプログラムです。プログラムを実行すると、すべてのコマンドでマウスの動きを確認できます。マウスの動きをキャプチャするために、CLIで以下のコマンドを実行します。他の人とは異なる値を試すこともできます。

例

>>> import pyautogui
>>> pyautogui.size()
Size(width=1366, height=768)
>>> width, height = pyautogui.size()
>>> width
1366
>>> height
768
>>> pyautogui.position()
Point(x=750, y=293)
>>> pyautogui.position()
Point(x=750, y=293)
>>> pyautogui.position()
Point(x=750, y=293)
>>> pyautogui.moveTo(10, 10)
>>> pyautogui.move(10, 10, duration=1.5)
>>> pyautogui.move(10, 10, duration=1.5)
>>>
>>> pyautogui.move(10, 10, duration=1.5)
>>> pyautogui.move(10, 10, duration=1.5)
>>> pyautogui.move(10, 10, duration=3.0)
>>> pyautogui.moveRel(20, 0)
>>> pyautogui.moveRel(250,0)
>>> pyautogui.moveRel(250, 0, duration=2.5)
>>> pyautogui.moveRel(0, -100)
>>> pyautogui.moveRel(0, -150, duration=1.5)
>>> pyautogui.position()
Point(x=210, y=526)
>>> pyautogui.click(339, 38)
>>> pyautogui.click()

上記のプログラムを実行すると、期間を設定すると、マウスの動きがその期間継続することに気付くかもしれません。エスケープを押して、最後のコマンドのコントロールを元に戻します- pyautogui.click（）

キーボード制御機能

typewrite（）関数

主要なキーボード関数はtypewrite（）です。この関数は、渡された文字列内の文字を入力します。各文字キーを押す間に遅延間隔を追加するには、intervalキーワード引数にintまたはfloatを渡します。

>>> pyautogui.typewrite('Hello, TutorialsPoint!') #Prints out 'Hello, Tutorialspoint!' instantly
>>> Hello, TutorialsPoint!
>>> pyautogui.typewrite('Hello, TutorialsPoint!', interval=0.25) #Prints out 'Hello, Tutorialspoint!' with a quarter second delay after each character
>>> Hello, TutorialsPoint!

press（）、keyDown（）、keyUp（）関数

これらのキーを押すには、press（）関数を呼び出して、pyautogui.KEYBOARD_KEYSから文字列を渡します（例：Enter、esc、f1）。

>>> pyautogui.press('enter') #press the Enter key
>>>
>>> pyautogui.press('f1') #press the F1 key
>>> p
>>> pyautogui.press('left') #press the left arrow key

typewrite（）と同様に複数のキーを押すには、-

>>> pyautogui.press(['left','left', 'left'])

hotkey（）関数

ホットキーまたはキーボードショートカットを押すのを便利にするために、hotkey（）にいくつかのキー文字列を渡して、順番に押してから、逆の順序で離すことができます。

>>> pyautogui.hotkey('ctrl', 'shift', 'esc')

上で実行すると、私のマシン（ウィンドウ）に「タスクマネージャー」ウィンドウが開きます。

上記はプログラムの下で実行するのと同じです-

>>> pyautogui.keyDown('ctrl')
>>> pyautogui.keyDown('shift')
>>> pyautogui.keyDown('esc')
>>> pyautogui.keyUp('esc')
>>> pyautogui.keyUp('shift')
>>> pyautogui.keyUp('ctrl')

以下は、いくつかのpyautoguiキーボード機能を示すプログラムです-

>>> import pyautogui
>>> pyautogui.click(90, 90)
>>> pyautogui.click(90, 90);pyautogui.typewrite('Hello, World!')
>>> pyautogui.click(150, 150)
>>> pyautogui.click(150, 150);pyautogui.typewrite('Hello, World!')
>>> pyautogui.click(150, 150);pyautogui.typewrite('Hello, World!', interval=0.2)
>>> pyautogui.click(150, 150);pyautogui.typewrite(['A', 'B', 'left', 'left', 'x', 'y'])
>>> pyautogui.click(150, 150);pyautogui.typewrite(['A', 'B', 'left', 'left', 'x', 'y'], interval=1)
>>> pyautogui.KEYBOARD_KEYS
['\t', '\n', '\r', ' ', '!', '"', '#', '$', '%', '&', "'", '(', ')', '*', '+', ',', '-', '.', '/', '0', '1', '2', '3', '4', '5', '6', '7', '8', '9', ':', ';', '<', '=', '>', '?', '@', '[', '\\', ']', '^', '_', '`', 'a', 'b', 'c', 'd', 'e', 'f', 'g', 'h', 'i', 'j', 'k', 'l', 'm', 'n', 'o', 'p', 'q', 'r', 's', 't', 'u', 'v', 'w', 'x', 'y', 'z', '{', '|', '}', '~', 'accept', 'add', 'alt', 'altleft', 'altright', 'apps', 'backspace', 'browserback', 'browserfavorites', 'browserforward', 'browserhome', 'browserrefresh', 'browsersearch', 'browserstop', 'capslock', 'clear', 'convert', 'ctrl', 'ctrlleft', 'ctrlright', 'decimal', 'del', 'delete', 'divide', 'down', 'end', 'enter', 'esc', 'escape', 'execute', 'f1', 'f10', 'f11', 'f12', 'f13', 'f14', 'f15', 'f16', 'f17', 'f18', 'f19', 'f2', 'f20', 'f21', 'f22', 'f23', 'f24', 'f3', 'f4', 'f5', 'f6', 'f7', 'f8', 'f9', 'final', 'fn', 'hanguel', 'hangul', 'hanja', 'help', 'home', 'insert', 'junja', 'kana', 'kanji', 'launchapp1', 'launchapp2', 'launchmail', 'launchmediaselect', 'left', 'modechange', 'multiply', 'nexttrack', 'nonconvert', 'num0', 'num1', 'num2', 'num3', 'num4', 'num5', 'num6', 'num7', 'num8', 'num9', 'numlock', 'pagedown', 'pageup', 'pause', 'pgdn', 'pgup', 'playpause', 'prevtrack', 'print', 'printscreen', 'prntscrn', 'prtsc', 'prtscr', 'return', 'right', 'scrolllock', 'select', 'separator', 'shift', 'shiftleft', 'shiftright', 'sleep', 'space', 'stop', 'subtract', 'tab', 'up', 'volumedown', 'volumemute', 'volumeup', 'win', 'winleft', 'winright', 'yen', 'command', 'option', 'optionleft', 'optionright']
>>>
>>> pyautogui.click(100,100);
>>> pyautogui.click(100,100); pyautogui.typewrite('Hello world!')
>>> Hello world!
>>> pyautogui.click(100,100); pyautogui.typewrite('Hello world!', interval=0.5)
>>> Hello world!
>>> pyautogui.click(100,100); pyautogui.typewrite(['a', 'b', 'left)', 'left', 'X', 'Y'])
>>> aXYb
>>> pyautogui.click(100,100); pyautogui.typewrite(['a', 'b', 'left', 'left', 'X', 'Y'])
>>> XYab
>>> pyautogui.click(100,100); pyautogui.typewrite(['a', 'b', 'left', 'left', 'X', 'Y'], interval=1)
>>> XYab
>>> pyautogui.press('f1')