Можно ли обучить бота повторять действия в игре?

Question

[Elbro]

Есть такой чисто теоретический вопрос. Можно ли как-то:

1. Записать все действия с клавиатуры и мышки чтобы потом запустить бота и он все повторил
2. Научить бота просто глядя на экран повторять действия (верю что это очень сложно и врятле является решением(3д игра))

Answer 1

[mayton2019]

Если речь идет о computer vision - то да. Скорее всего можно. Но мне жаль ваш талант. Если вы действительно создатите такого бота который обучается по картинке то вас можно нанимать на работу и платить столько денег что дешевая прокачка Эльфа в какой нибудь MMORGPG вам станет просто не нужна. Сможете купить все.

Answer 2

[Jacen11]

1 да
2 да

по первому пункту, это называется автокликер
по второму пункту, очень неэффективно будет, это получается нужно анализировать каждый кадр, миллион точек, комп свихнется (те кликеры что я видел могут проанализоровать цвет конкретного пикселя, если он один то еще ок)

Comments

[freeExec]

Конечно, ни кто в здравом уме не обрабатывает исходную картинку в разрешении 2К. Когда её можно сжать и не потерять нужные элементы. Т.е. вполне можно сжать картинку до 128*128 и определить местоположение танка на экране. А уже потом взять крупный план в этом месте, чтобы выцелить лючок на броне.

[Jacen11]

Т.е. вполне можно сжать картинку до 128*128 и определить местоположение танка на экране. А уже потом взять крупный план в этом месте, чтобы выцелить лючок на броне

Можно конечно, только при таком сжатие наверняка потеряются важные части.

Вы серьезно утверждаете что можно одному написать алгоритмы вычисления лючка для десятков танков? И не перепутать зелёный танка, с зелёным травы. Освещение цвета будет меняться, на разных картах разные цвета элементов. Это какой то сверх колоссальный объем работы

у доты и старкрафта есть специально апи для сторонних ИИ, никто не занимается всерьез распознаванием по картинке

[Slavik KENNY]

И не перепутать зелёный танка, с зелёным травы.

и учесть 100500 различных скинов еще :)

[Stalker_RED]

Jacen11, при том что и сами модельки танков и карты их уязвимостей свободно гуглятся задача становится не такой уж сложной - опознать модель, определить под каким она ракурсом, прицелиться в ближайшую уязвимую точку.