Решение подходит, но как я понимаю координаты нужно как-то самому методом тыка искать? И текст можно передавать как html? Текст нужно передать форматированый
Nejtron, решил отказом от cv2 и переписал все используя только pyautogui там я просто искал нужное изображение если оно есть получал координаты центра и кликал по нему, если нужен код чуть позже могу скинуть сюда
Юрий Самойлов, я сейчас пишу web приложение на python, чтобы при открытии хрома запускалось мое приложение со стартовой страницей мэйла. а дальше проверялось если адрес нужный то ок если нет то посылал лесом