Clicar em imagem reconhecida - Python + pyautogui

[claudio_sbc]

Bom dia pessoal,

Tenho o script abaixo para utilização em um jogo online, atualmente ele já reconhece o monstro e teleporta quando não encontrado o monstro na tela.

Não estou conseguindo fazer com que ele clique sobre o monstro quando a condição é cumprida.

No loop consegui definir a semelhança mínima para que a condição seja cumprida.

Como eu faria para clicar sobre a imagem considerando a semelhança mínima?

Alguém poderia ajudar?

Coloquei até um vídeo no youtube demonstrando o que acontece:

Código utilizado:

from pyautogui import moveTo, click
import pyautogui
import time
import keyboard
import random
import win32api, win32con

imagem = 'sprite.png'
while 1:
    if pyautogui.locateOnScreen(imagem, confidence=0.7):
        print("Mob encontrado!")
        time.sleep(0.7)
    else:
        print("O mob não está na Tela...")
        print("Teleportando para procurar.")
        time.sleep(0.2)
        pyautogui.press('F2')
        time.sleep(0.7)

 

Editado Novembro 26, 2021 por claudio_sbc
Adicionado vídeo com a dificuldade apontada.

[claudio_sbc]

 

Consegui fazer reconhecer a posição da imagem com o código abaixo, está encontrando perfeitamente, porém, só não clica kkkk.

Conseguem ajudar?

from pyautogui import moveTo, click, press
import pyautogui
import time
import win32api,win32con

def click(x,y):
    win32api.SetCursorPos((x,y))
    win32api.mouse_event(win32con.MOUSEEVENTF_LEFTDOWN,0,0)
    win32api.mouse_event(win32con.MOUSEEVENTF_LEFTUP,0,0)

while True:
    sc = pyautogui.screenshot(region=(1118, 25, 800, 615))
    width,height = sc.size

    for x in range(0,width,10):
            achou = 0
            for y in range(0,height,10):
                r,g,b = sc.getpixel((x,y))
                print(r,g,b)

                if r == 255 and g == 255 and b == 0:
                    achou = 1
                    print('tentando clicar')
                    press('F4')
                    click(1118+x,25+y)
                    time.sleep(0.5)
                    break
            if achou ==1:
                break

[LuisP]

Estou exatamente travado no mesmo problema que você, consigo fazer tudo, menos clicar kkkkkkk, acontece unicamente com o ragnarok, caso eu encontre alguma solução eu retorno aqui e compartilho. Boa sorte!

Editado Dezembro 15, 2021 por LuisP