Автоматизация деятельности в браузере. Возможно ли такое реализовать и как?

Question

[ShabaevMB]

Приветствую всех читающих эти строки.

Возможно ли написать расширение для Safari, которое будет само наводить движуху в своем окне. То есть мне надо, чтобы впаять туда распознавание элементов (OpenCV), имитировались клики, имитировалось "Активное окно" в каждой вкладке браузер, коих будет около 15-18 в каждом окне. И чтобы в каждом окне одной и той же Safari происходили разные действия, которые я бы смог скоординировать отдельно. В общем, возможно ли написать такое и как? Подскажите направление, в котором копать.

Слыхивал про всякие Макросы-АйМакросы, но это не подойдет. Не хватит просто запрограммировать клики в определенных местах, нужно еще программе дать понять куда кликать и чем руководствоваться.

Что-то вроде java.awt.Robot в JAVA, но понавороченнее.

P.S. пардон за мои изощрённые капризы.

Answer 1

[Dimonchik]

https://github.com/SeleniumHQ/selenium/wiki/Safari...