[Python/자동화] pyautogui 아이콘 이미지로 클릭 이벤트 자동화하기

자동 클릭 매크로 구현하기

많은 사람들이 익숙하게 사용하는 PowerPoint 앱에서 아이콘 이미지를 사용하여 자동으로 클릭하는 매크로를 간단하게 구현해 보겠습니다.

구현 시나리오

파워포인트 앱에서 자동으로 새 슬라이드 추가하기

전체화면 캡쳐하기

파워포인트가 실행된 상태에서 아래 코드를 통해 전체 화면을 캡처하고 저장할 수 있습니다.

import pyautogui
pyautogui.screenshot('full_screen.png') #스크린샷 이미지 저장

visual studio code에서 실행한 화면입니다. 여기서 누르고자 하는 새 슬라이드 아이콘 부분을 새로 캡처해 주었어요. 캡처까지 자동화를 원한다면, pywinauto를 활용하면 가능합니다! 추후에 이 부분도 포스팅해 보겠습니다.

클릭할 대상 아이콘 혹은 영역 캡쳐하기

저는 해당 영역을 캡처한 후 target.png라는 이름으로 저장했어요.

클릭 구현하기

target_location = pyautogui.locateOnScreen('target.png')

print(target_location)

실행 결과는 아래와 같아요. left, top, width, height는 해당 영역의 좌표를 의미합니다.

원하는 영역을 안전하게 클릭하려면 해당 영역의 중앙을 클릭하는게 좋겠죠? center() 함수를 이용하여 중앙 좌표를 이용한 후, 이동하여 클릭을 실행해줍니다.

# 중앙 좌표 구하기
center_point = pyautogui.center(target_location)

# 중앙 좌표로 이동하기
pyautogui.moveTo(center_point.x, center_point.y)

# 클릭 실행
pyautogui.click()

위의 예제처럼 타겟 영역의 좌표들을 모두 구한 후 다시 중앙값을 구할 수도 있지만..! 해당하는 영역의 중심 좌표를 바로 리턴해주는 함수 locateCenterOnScreen()을 쓸 수도 있습니다.

center_point = pyautogui.locateCenterOnScreen('target.png')
pyautogui.moveTo(center_point.x, center_point.y)
pyautogui.click()

아래 이미지와 같이 새 슬라이드가 잘 생성되었어요 😊