Проблема с обучением змейки на python, почему она не обучается быть эффективней?

Question

[Mirozr]

Доброй ночки всем, решил я войти в ген алгоритмы но все пошло не поплану, кратко и ясно постараюсь обяснить. Создал я игру, реализовал легкую нейросеть, написал основной файл, после запуска и всех возможных изменений с моим уровнем змейка добивалась лутших результатов лиш в том случае если она себя как можно быстрее убивала или просто крутилась как волчок. Одним словом прошу вас проверить мой код и подилиться решением проблемы потомучто мне очень хочеться понять эту сферу в програмировании помкольку сам я дошол до предела понимания и нужно чтоб кто-то опытный тыкнув пальцем в проблему в моем коде!
Код тут -> Мой код на GitHub

Comments

[Vindicar]

Копаться в коде вряд ли кто-то будет, но можно задать наводящие вопросы.
В первую очередь, ты должен как-то оценивать качество работы каждой "особи" - иными словами, написать какую-то целевую функцию, которая численно выразит, насколько та или иная особь хороша.
Какие факторы ты учитываешь в этой функции, и как она в целом выглядит?

[mayton2019]

Когда имеют дело с анализом машинного обучения - то смотрят обычно на графики.
Вот ты говоришь - эффективнее. Значит у тебя где-то в коде должна быть величина
эффективности и эта величина должна участвовать в алгоритме в роли фитнеса или
в роли какого то подкрпепляющего воздействия.

Твой код скорее всего никто не будет смотреть и запускать. Это too much для хабр
формата. Но ты должен предоставить вопрос так чтобы было понятно где ты ошибся.

Иначе выглядит как будто ты много-много нафантазировал или тебе ЧятЖПТ написал
а мы должны тут провести аудит.

[fenrir]

mayton2019, а я сходил в репозиторий и там буквально лежит файл gptmain.py :)
Да и судя по остальным файлам они все нагенерены gpt.

[mayton2019]

fenrir, :)

[Аркадий Гальченко]

fenrir, может Маск тестирует новую версию gpt которая самообучается, задавая вопросы на хабре

Answer 1

[Ланской Кирилл]

Змейку можно легко написать только с NumPy, https://habr.com/ru/articles/799123/(это моя статья).

Comments

[Mirozr]

Статья хорошая, но мне нужно часное решение проблемы. А проблема 1. Неправильное использование ген либы deap. или 2. Что-то не так с нейронкой. или 3. Неправильные вознаграждения для самой преспособленной особы. Спасибо вам за внимание!

[Ланской Кирилл]

Какая фитнес функция?

[Mirozr]

Ланской Кирилл Обычная которая выбирает, максимальное число из награды.

[Ланской Кирилл]

Mirozr, по кол-ву яблок?

[Mirozr]

Ланской Кирилл, по кол-ву яблок за игру и до смерти(смерть = -1балл), плюс -0.0001 каждый шаг.