Как начать работать с OpenAI gym?

Question

[Александр]

Наткнулся на сайт OpenAI gym и решил попробовать поработать с ним. Возникла проблема, с чего начать? Я выбрал баланс (из классики). Просмотрев тонны зарубежных роликов, везде видел удобный интерфейс с местом вписывания когда на сайте, но сам найти не смог. Пробовал скомпилировать код, который нашёл на другом сайте, чтобы понять, что нужно делать:
Код
У меня возникли следующие вопросы: хватит ли математики за 8 класс для начала обучения в области ИИ, с чего лучше всего начать, подходит ли книга Андреа Лонца "Алгоритмы обучения с подкреплением на Python"?

Answer 1

[rPman]

Формально ты сможешь понять как использовать готовые инструменты (99% решений) но понимания как это работает внутри не будет (чего обманываться, людей которые это понимают очень и очень мало) а что значит это понимание - когда готовые инструменты решения не дают, ты не будешь понимать что делать дальше, когда как это понимание позволит выбрать правильное направление действий (например поработать над весами нейронной сети, в т.ч. вручную, т.е. написать свой код который будет с ними что то делать)

p.s. нейронные сети (основа большинства современного ИИ) - это не про алгоритмы, а про обучающие данные. Собственно собирать эти данные и подготавливать их к виду, которые нужны уже реализованным алгоритмам и есть большая часть работы.

Comments

[Александр]

В первую очередь я бы хотел узнать как это работает, но в доступной форме, а также постепенно углубляясь. Можете посоветовать книжки?

[rPman]

не посоветую, гуглятся XX лучшийх книг по глубинному обучению и нейронным сетям (там даже ссылки на скачивания перевода ну или лучше купить), какие лучше или хуже я хз

Настоятельно рекомендую попрактиковаться на задачах, в идеале на реальных а не синтетических, сам собрал данные (на старте удобно было бы не из реального мира а игрового, их проще собирать), но.. есть нюанс, хорошие интересные задачи потребуют хорошее (дорогое) железо для обучения нейронных сетей либо очень много времени, при работе только на процессоре

поэтому так и получается что стать специалистом без базы как знаний так и финансовой будет нереально

Answer 2

[Николай Савельев]

хватит ли математики за 8 класс для начала обучения в области ИИ

Нет, не хватит.
Нужно как минимум уметь оперировать матрицами, а в 8 классе, этому не учат. По крайней мере, моя дочка в 8 классе и до матриц им ещё далеко.

Comments

[Александр]

Есть ли вариант пройти отдельные темы, чтобы начать изучение или всё же лучше отложить идею? Просто я видел много олимпиад по ИИ для 8-11 классов, значит каким-то образом возможно совершить быстрый старт?

[rPman]

мне кажется олимпиады для 8-11 классов не подразумевают слишком глубокого понимания
начни просто хоть что то делать, хоть что то читать, будет получаться - дерзай, не будет - значит селяви