Задать вопрос

dmshar

Ответы пользователя по тегу Python

  • Как вывести на экран список ребер, считанных из файла?

    @dmshar
    То-ли я чего-то недопонимаю, то-ли вопрос - почти детский.
    В вашей постановке любой элемент матрицы, отличный от нуля соответствует ребру, индексы этого элемента - узлы связанные данным ребром, а значение - вес. Все!
    Вопрос-то в чем? Как перебрать все элементы матрицы?
    Ответ написан
    10 комментариев
    10 комментариев

  • Как можно определить класс по графику с помощью свёрточных нейронных сетей?

    @dmshar
    Типичная задача многомерной классификации. Решается либо любым классическим методом (и при двух входных параметрах и трех классах - наверняка это предпочтительно) из библиотеки Scikit-Learn к примеру.

    Ну, вот тут автор балуется с Keras:
    https://blog.stroganov.pro/классификация-нейросетью/
    Можете повторить подвиг, если очень хочется.

    А вот зачем сюда прикручивать сверточные сети, предназначенные вообще-то говоря для работы с визуализацией - не понимаю. Из-за моды?
    Ответ написан
    1 комментарий
    1 комментарий

  • С какой книги начать изучение блокчейн?

    @dmshar
    Вот тут:
    https://www.amazon.com/Mastering-Blockchain-Distri...
    Не на Python конечно, но очень подробно и методично. После нее будет все равно, на каком языке работать дальше.
    Ответ написан
    Комментировать
    Комментировать

  • Как сделать поиск деталей на изображении?

    @dmshar
    Ну, если речь идет о рспознавании лиц, то, например:
    https://habr.com/ru/post/301096/
    https://habr.com/ru/company/synesis/blog/238129/
    api-2d3d-cad.com/face_recognition_with_opencv
    Если объекты "вообще" - то можно начать отсюда:
    https://www.asozykin.ru/deep_learning/2018/07/24/O...
    Ответ написан
    Комментировать
    Комментировать

  • Что нужно знать, чтобы заниматься анализом данных?

    @dmshar
    Что-бы заниматься анализом данных надо, в первую очередь:
    1. Уметь САМОСТОЯТЕЛЬНО искать и находить информацию в интернете.
    2. Уметь САМОСТОЯТЕЛЬНО анализировать найденную информацию.
    3. Уметь САМОСТОЯТЕЛЬНО делать выводы из анализа.
    Пока у ТС с этим, очевидно, никак. Данный вопрос даже на Тостере задается по три раза в неделю, а в интернете - ежедневно куча статей на тему. Открывем теги "Машинное обучение", "Data science", "Data mining", да "IT-ОБРАЗОВАНИЕ" наконец. и вперед! "А вот нет, искать - не хочется, найти - не получается, пусть кто-то мне другой найдет и расскажет.

    И еще. Если даже "джун в программировании" вам не нравится, потому как "очень много учить надо", то хочу вас разочаровать, в анализе данных учить надо во много раз больше.
    Ответ написан
    3 комментария
    3 комментария

  • Как исправить ошибку builtins.TypeError: '>' not supported between instances of 'numpy.ndarray' and 'float'?

    @dmshar
    Так
    from sklearn.naive_bayes import GaussianNB
    или
    clf = BernoulliNB()
    Ответ написан
    2 комментария
    2 комментария

  • Почему в решениях с одинаковой сложностью существенная разница во времени расчета?

    @dmshar
    "Я вам не скажу за всю Одессу" :-), но давайте сравним только with_map(a, l) и traditional_way(a, l). В обоих функциях присутствует цикл (for item in l:) который выполняется примерно за одинаковое время. Но with_map содержит еще и строку
    z = min(map(lambda x: abs(a-x), l)) , которая сначала выполняет map(lambda x: abs(a-x), l) -
    еще один проход по массиву, а в полученном результате ищет min - т.е. пробегает по списку еще раз. Итого - три прохода по массиву, вместо одного в traditional_way. С остальными функциями - примерно та-же история. (Например min(l, key=lambda x: abs(a-x)) - это как минимум два прохода по вашему списку).
    Ответ написан
    3 комментария
    3 комментария

  • Какие технологии выбрать для веб приложения с использованием нейронных сетей?

    @dmshar
    Стандартный стек библиотек для реализации алгоритмов ML "с нуля на Python":
    - Scipy,
    - NumPy,
    - Pandas,
    - Scikit-learn.
    Для визуализации - связка с D3.js.
    Для курсового проекта - хватит более чем.
    Ответ написан
    Комментировать
    Комментировать

  • Как скачать и обрезать изображения?

    @dmshar
    Вообще-то вставлять в paint для того, что бы потом "обрезать и сохранить" вовсе не надо. Если, конечно, вы не собираетесь делать это вручную. Но если вы этого не понимаете, то я слабо представляю себе, как можно объяснить, как выполнить все остальное. Ну, посмотрите, например, как работать с OpenCV. Впрочем, если вы поведаете нам, где и что вы уже учили, то может и удастся немного "адаптировать" объяснение под вас..
    Ответ написан
    4 комментария
    4 комментария

  • Знаете ли вы ещё подобные проекты?

    @dmshar
    Таких проектов - с открытым исходным кодом в том числе - достаточно много в сети. Вы бы предварительно рассказали, что именно вы считаете "интересным" проектом. Например, то что я увидел, мне интересным не показался.
    Ответ написан
    6 комментариев
    6 комментариев

  • Нейронная сеть. Как предсказать победу одной из трех команд?

    @dmshar
    Задача предсказания победителя в матче ничем не отличается от задачи классификации животного. Только в спортивной задаче объектом классификации выступает "матч" который включает описание команд, в нем принявших участие. Результат классификации - соответственно не "кошки"/"собачки", а "победа команды 1"/ "победа команды 2".
    Соответствующие "готовые реализации" есть и в Python, и в R, да и в практической любой библиотеке по Machine Learning.
    Ответ написан
    6 комментариев
    6 комментариев

  • Как сделать бинарную классификацию текстов на python?

    @dmshar
    Вообще-тот материалов в сети не просто много, а необозримо много. На любой цвет и вкус, с учетом любого инструмента, которым вы владеете. Практически любая книга по машинному обучения или по Нейросетям сегодня обязательно содержит раздел, посвященную работу с текстами и классификация - самая простая задача, которая при 'том обсуждается.
    Вот тут почти элементарное введение в тему, что как и почему делать:
    https://tproger.ru/translations/text-classificatio...
    Вот тут разбивают на 20 тем, но вы можете и сократить до нужных вам двух:
    scikit-learn.org/stable/tutorial/text_analytics/wo...
    Вот тут описана "Готовое решение" с помощью другой библиотеки
    www.nltk.org
    Но главная проблема не в источниках. Главный вопрос - у вас есть достаточно объемный и при этом размеченный набор данных для обучения любого алгоритма? Если есть - можно и источники поизучать, а если нет - то подумайте, как найти такой набор.
    Ответ написан
    Комментировать
    Комментировать

  • Как запустить pretrained model?

    @dmshar
    Попробуйте просто убрать этот оператор.
    Ответ написан
    6 комментариев
    6 комментариев

  • Как создать Обучаемый бот на основе ML?

    @dmshar
    "я вот новичок в машинном обучении" + "но есть хорошая идея, как можно обучать бота" ---> Вы уверены, что идея действительно хорошая?
    обучать бота решать задачи разных типов в сфере финансы ---> Вы уверены, что один бот сможет решать задачи разных типов?
    То есть будет проблема бот чтобы понял эту проблему ---> Ага, бот должен сам понять проблему. Как вы себе это реально представляете?
    и решил с соответсвующими формулами ---> т.е. вы ожидаете от бота решения с формулами??? Простите, а зачем?
    Пока в голову пришло только по порядку всевозможные проблемы писать----> Эта фраза весьма загадочна. Какие "всевозможные" проблемы по какому "порядку" писать? Зачем? какое это имеет отношение к написанию самого бота???
    Может кто то сможет подсказать оптимальное решение?---> Отпимальным будет начать с того, что-бы разобраться с тем, что такое "машинное обучение", что такое "бот", как вообще там все работает, потом внятно сформулировать вопрос. За одной по дороге поймете, на сколько "хороша" идея.
    Ответ написан
    2 комментария
    2 комментария

  • Выбор архитектуры и средств реализации сверточной нейронной сети?

    @dmshar
    Вообще-то ответ на три первых заданных вопроса - это нехилая себе такая работа. С соответствующим анализом, сравнением и пр. необходимыми атрибутами.
    Ответ на три последних - это на уровне студента первокурсника-троечника(отличники даже на первом курсе таких вопросов уже не задают).
    Поэтому, исходя из заданных вопросов, у вас есть два пути. Лучшее что вы можете сделать - если не хотите, конечно, с треском завалить проект - это нанять компетентного в этих вопросах человека. Дорого конечно, но за знания и умения (других) надо платить.
    Второй путь - самостоятельно разобраться в теме, благо литературы - навалом, даже как-то не совсем удобно их тут перечислять. Ну, для затравки, разве что:
    1. Хайкин Нейронные сети полный курс. 2 издание
    2. Николенко С., Кадурин А., Архангельская Е. Глубокое обучение. — СПб.: Питер, 2018
    3. Гудфеллоу Я., Бенджио И., Курвилль А. Глубокое обучение -М.: ДМК Пресс, 2018.
    4. David Kriesel A Brief Introduction to Neural Networks
    (вон, в комментах вам даже чью-то докторскую диссертацию по ходу освоить предложили :-). Правда не думаю, что вы в ней разберетесь, не освоив истоки)
    Ну и в интернете ссылок более чем много. Для совсем ленивых - есть видеокурсы. Даже на русском :-)
    Только долгий этот путь. Так что лучше все-таки - первый.
    Ответ написан
    1 комментарий
    1 комментарий

  • Есть ли библиотеки для автоматической генерации нейросетей?

    @dmshar
    Ну, начнем с TensorFlow. Все что упомянуто, можно указывать.
    Ответ написан
    Комментировать
    Комментировать

  • Код или математика?

    @dmshar
    Давайте все таки строго формализуем вопрос.
    "в коде обучения нейронной сети или математической модели этого самого обучения" - как то совсем нечетко. Предположим, вы имели ввиду
    "математическая модель обучения" =="алгоритм обучения сети"
    "код обучения" == "программная реализация этого самого алгоритма".
    Тогда задача получает строгую формулировку: "Мы запрограммировали некоторый процесс обучения. Результат не такой, как мы ожидаем. Где ошибка - в алгоритме или в коде".
    И если это так, то в такой постановке задача хоть и не может быть решена с абсолютной точностью, но понятно что надо делать, что-бы дать ответ. По большому счету, она теперь ничем не отличается от обычной задачи, решаемой на этапе тестирования при разработке любого программного продукта - от игрушек до веб-сайтов.

    Вариантов решения два.

    Аналитический:
    1. Глубинный анализ алгоритма (т.е. еще раз изучаем, что написано в той книжке, откуда мы его взяли, ведь и в книжках бывают ошибки).
    1. Традиционный код-ревью.
    (Ну, как тут уже пошутили - можно взвалить обе эти задачи на преподавателя :-). ).

    Экспериментальный:
    1. Находим и четко записываем алгоритм.
    2. Даем его запрограммировать двум, трем.... чем больше-тем лучше... программистам. Получаем множество реализаций одного и того-же алгоритма.
    3. Прогоняем процесс обучения сети через каждую реализацию. Сравниваем результаты с ожидаемыми.
    4. Если реализации дали результаты, отличные от ожидаемых, но совпадающие между собой - ищи ошибки в алгоритме. Если реализации дали результаты, отличные от ожидаемых, но различные между собой - ищи ошибки в коде.

    Но простых, "книжных" решений этой задачи - нет.
    Ответ написан
    Комментировать
    Комментировать

  • Что не так с моим кодом python?

    @dmshar
    При попытке четвертого захода в функцию dot первым параметром передается число (конкретно -"class 'float" - 0.5833820394550312) , а не список.
    Ответ написан
    8 комментариев
    8 комментариев

  • Какие книги/курсы посоветуете для R/Python (Data mining)?

    @dmshar
    Рекомендую:
    https://ru.stackoverflow.com/questions/678970/
    Ответ написан
    Комментировать
    Комментировать

  • Необходимо ли знать прикладные инструменты для больших данных, анализа и машинного обучения?

    @dmshar
    Для работы с Big Data, Machine Learning и аналитики данных существует уйма различных инструментов - от Python до Watson, от RCPP до TensorFlow, от Tableau до SPSS, от RapidMiner до Hadoop.... Список можно продолжать и продолжать. Между прочим, даже тривиальный MS EXCEL имеет средства для большинства из указанных задач.
    В принципе все задачи можна решать хоть на С++, хоть на Java хоть на Ассемблере. Вот, даже на JavaScript уже пишут нейронные сети. Вопрос - что именно вы хотите в конечном счете сделать, как глубоко понимать что именно вы делаете, как быстро вам надо проходить путь от постановки задачи к готовому решению, какие деньги вы готовы потратить на получение этого решения и какими начальными знаниями в области технологий программирования вы или ваша команда владеете.
    Поэтому рекомендую обучение начать не с инструментов, а с идей, алгоритмов и методов, лежащих в основе задач Data Science. А по ходу - разберетесь, какой именно инструмент конкретно для вашего случая наиболее подходящий. И скорее всего, это будет не один какой-то инструмент, а несколько, которые в совокупности наиболее полно и эффективно покроют именно ваш круг потребностей.
    Ответ написан
    Комментировать
    Комментировать