Desenvolvimento de um Bot em Python ou outra linguagem

Olá tudo bem?
Estou precisando de uma aplicação simples que eu acredito que pode ser desenvolvida em Pithon, trata-se de um Bot, uma automação simples. Trabalho com um software desktop e gostaria de automatizar minha tarefa. Resumindo… Existe 2 padrões de cores EX: (Padrão 1 = branco, azul, azul) ou (Padrão 2 = branco, vermelho, vermelho) no software, tenho que verificar 4 lugares o tempo todo, se achar o padrão ‘1’ das cores e o 4º lugar estiver ok, clica em um botão… Se achar um padrão ‘2’ das cores e o 4º lugar estiver ok, clica em outro botão, caso contrário continua verificando.
Porém, o mais importante é que os 4 lugares e os dois botões precisam ser variáveis (Vou colocar manualmente a coordenada do mouse em uma interface utilizando a biblioteca pyautogui ou no código mesmo).