Можно ли узнать информацию о всех доступных для нажатия областях на активном окне приложения в Windows?

Question

[Nemo111]

Вот рабочий стол Windows. На нем открылось окно приложения. Оно активизировано. Можно ли узнать информацию о всех доступных для нажатия областях на этом приложении, их названия или координаты? Если нажимать клавишу "Tab" она такие области обходит активизируя их по очереди.
Буду благодарен на указание нужной библиотеки желательно на Python если такое вообще возможно.

п.с. узнать нужно средствами винды, а не открытого приложения

Comments

[Александр]

Ну с подключением виндовых библиотек все возможно.

[Константин Цветков]

узнать нужно средствами

А чем ещё? Напишите программу (например, на WinAPI), она и будет анализировать ваше приложение.

Answer 1

[Alexej Simakov]

Инспектор из SDK Майкрософта https://docs.microsoft.com/de-de/windows/desktop/W...
Инспектор AutoIt https://www.autoitscript.com/autoit3/docs/intro/au...
Библиотека на питоне позволяющая манипулировать приложениями Windows https://pywinauto.readthedocs.io/en/latest/getting...

Answer 2

[Константин Цветков]

о всех доступных для нажатия областях … нажимать клавишу "Tab" она такие области обходит

Некоторые контролы не получают фокус вообще. У некоторых Control.TabStop Property может быть выключена.

Список контролов получить возможно, даже вложенный. Наверное можно узнать, есть ли у контрола обработка нажатия мыши, но оный может быть выключен.

Поэтому, я думаю, возможно решение "в лоб", то есть поставить хук на обработку событий и проэмулировать нажатие мышью всех точек на окне приложения.

Comments

[Ezhyg]

Даже сканеры окон не помогут, я подобным раньше баловался, всякие autoit и прочие "скриптологи" записывалки действий. Если заранее не знаешь - не найдёшь :(

[#]

Ezhyg, это при визуально/ручном тыкании. а вообще, если приложение использует стандартные win32 api, программно все делается на ура

другой вопрос виндовый QT - там обломинго сразу (как бы дармовая защита от ботизации выходит)

[Ezhyg]

#, наоборот, я могу видеть "контрол" глазами или знать, куда жать, но он может быть отключен, быть нестандартным и т.п.

[#]

Ezhyg, все делается, поверь (пришлось собаку съесть на проекте).. но да, не всегда просто. в частности местами таймауты нужны, причины для которых так и остались для меня загадкой (надо было гнать результат)

[Ezhyg]

#, блджадж...

я подобным раньше баловался

Лучше "съешь котика, в нём витамин цЭ".