Можно ли сделать бота для браузерной игры?

Question

[HSGOD]

Есть браузерная игра(вида шахматного поля) идёт вид сбоку.
Задача - сделать бота на c#, чтобы он распознавал врагов и автоматически их атаковал.
Метод придуманный мной - снизу под полем боя у нас есть линейка с нашими и вражескими ходами.
При наведении на вражеский ход, существа из этой ячейки подсвечиваются жёлтым цветом.
Можно ли сделать так, чтобы бот вычленял этот цвет(существа обводятся прям на поле) и перед каждым новым НАШИМ ходом выискивал новое местоположение всех вражеских существ?

Answer 1

[Saboteur]

все можно.
Но для браузерной игры может проще парсить html-dom?

Comments

[Василий Банников]

не думаю, что там есть дом. Скорее всего, там канвас

[HSGOD]

Василий Банников, да, там канвас, вот и вопрос вырисовывается, как так сделать.
Хотел картинку залить, она не льется сюда, а ссылкой тоже нельзя....

[Василий Банников]

HSGOD, ссылкой можно, картинки льются (обычно).
Если нет доступа к памяти игры, то остаётся только вытягивать изображение из канваса и распознавать объекты на изображении.
Распознавание можно сделать на opencv, или написать нейронную сеть для этого - в ML Net вроде есть встроенные функции для работы с изображениями, но ни с opencv ли с ml не подскажу, тк не разбираюсь в этой теме.

[HSGOD]

Василий Банников, проверь почту, я тебе лично выслал и если сможешь закинуть её сюда, я буду тебе только благодарен, картинка не льется - ошибку выдает(мб больше весит, чем положено), а ссылкой нельзя типо из-за запрещённых символов...... раз 10 пытался уже залить и так и этак.

[Василий Банников]

У вас картинка 3мб, вот она и не добавлялась)
В принципе, в такой игре можно даже без opencv - чисто на трансформации изображения выехать

[HSGOD]

Василий Банников, есть какие-нибудь предположение, предложения?)

[Василий Банников]

HSGOD, подключаетесь через селениум, вытаскиваете картинку из канваса (идём в гугл). Потом берёте область картинки, где располагается поле (думаю, она всегда одинаковая), потом растягиваете, чтобы получился квадрат (тоже идём в гугл. В фотошопе есть такая операция - можно попробовать загуглить через её название). Потом анализируем, что лежит в каждой клетке (тк у нас квадрат - это можно тоже по фиксированным координатам определять).
Остаётся только сохранить спрайты для каждого юнита и сравнивать их.
Как альтернативный вариант - можно взять heap snapshot и анализировать его. Думаю, там где-то есть объект, в котором хранятся позиции и типы юнитов.
Но я не уверен, на счёт эффективности обоих подходов - надо сравнивать.

[Надим]

Василий Банников, обычно браузерные игры на вебсокетах все. Имеет смысл сначала посмотреть что за данные там курсируют и если инфа там передаётся в нещашифрованном и более-менее понятном виде, то распознавание изображений тут лишнее, проще просто парсить ходы из сокета.

[Василий Банников]

Надим Закиров, что-то я даже не подумал об этом. В принципе, такая браузерка может даже не через вебсокеты, а через http общаться.

Answer 2

[Hemul GM]

Проще, разобраться с запросами (если обмен по http) или слушать вебсокет. Читать и отправлять данные. Имитировать ходы и тд.