Перспективные направления в Big Data?

Question

[researcher1111]

Так случилось, что проект которым я занимался был закрыт, писал на python, занимался real-time анализом данных. Услышал про big data. Как я понял тема перспективная. Начал учить R. Какое направление в big data выбрать? И какие технологии изучать? Что посоветуете?

Answer 1

[dmshar]

Ну, я бы не был столь категоричен относительно R.
Смотрим в один из самых авторитетных источников:
https://www.tiobe.com/tiobe-index/
R в 2008 году - 0.045% аудитории, в 2018 - 2.549%
Python в 2008 году - 4.227%, в 2018 - 4.678%.
Сравните темпы роста пользовательского компьюнити на том и и другом языках.
Можно сделать сравнение и за последние пять лет.
Да, Python пользуют примерно в два раза больше людей, чем R.
Но! Ниша R - исключительно DS. Ниша Python - DS+ Webразработка + Первый язык обучения( во многих школах США как минимум). Понятно, что аудитория за счет второго и третьего слагаемого будет существенно шире. Кстати, R - единственный откровенно "нишевый" язык в первой десятке.
Вывод. Хочешь в Big Data и Data Science - R И Python must have!

Answer 2

[asd111]

Если вы про анализ данных, то надо учить машинное обучение и python.

5 февраля стартует курс по машинному обучению от open data science на русском. Курс бесплатный.

https://habrahabr.ru/company/ods/blog/344044/

Ещё гляньте yandex clickhouse. Очень удобная штука для сбора статистики в больших масштабах.

R можете не учить. Сейчас все переходят на python для анализа данных.