Нужна ли математика для data science?

Question

[dimon223]

Вопрос дата саентистам. Насколько сильно нужна математика для того чтобы успешно работать по специальности? и действительно ли нужно знать теорию на глубоком уровне?
Я сейчас синьор ИТ инженер в сфере сетей, но хотел бы сменить специальность. Здесь в принципе тоже дохрена теории, и я ее даже учил, и когда то очень хорошо знал, но по большей сути она нужно только для того чтобы проходить собеседования, а я уже пять лет не собеседовался и многое забыл, потому что в реальной жизни больше важны навыки работы, т.е. прикладные умения. В data science также обстоят дела? Или вы реально прежде чем написать пару строк кода решаете длинные мат. уравнения?

P.S непосредственно Python я знаю на хорошем уровне.

Comments

[#]

а сам как думаешь?
поправь вопрос и приведи доводы против - как без математики продвинуться в этих областях?

это еще не все. обоснуешь - сможешь зарабатывать на лохах... (пока не поймают и не изобьют ученики )))

[dimon223]

#, мне коллега пару месяцев назад говорил что математику можно не учить, просто переходить сразу к изучению scikit-learn и других библиотек.

[#]

dimon223, так ответ то простой:
- где коллега?
- где ты?

.. если что не складывается, приходи поговорить с другими аргументами ;)))

[#]

dimon223, .. можно через пару месяцев ;)))))))))))))))))))))))

[dimon223]

#, похоже мне с вам и говорить то не о чем, вы на своей волне, оставайтесь там же.

[#]

dimon223, а тут все просто:
- ты на своей волне, и жестко в нее вцепился

[dmshar]

#, Ну, вы тоже можете рассказать коллеге, что для того, что-бы админить сеть не нужно ни что такое IP-адрес знать, ни что-такое пакет, да и вообще, понимать, как сеть работает - излишняя нагрузка. Берешь какой-нибудь Process Explorer и сразу все проблемы решены. Осталось что-бы вы друг другу с коллегой поверили.
Кстати, каких высот достиг коллега в DS?

[#]

dmshar, бррррррр...
1 - что бы сразу тебя отмести ))
ты хочешь сказать, что

что математику можно не учить, просто переходить сразу к изучению scikit-learn и других библиотек.

? .. пшел вон. без обид ))
2 - если ты хочешь сказать что то другое - научись говорить внятно.. тоже без обид ))

[dmshar]

#, А ты читать умеешь? А думать, что написано? Или главное - всех обо...рать, и получить от этого удовольствие? Или к вечеру думалка отключается? .. тоже без обид.

[#]

dmshar, не не не.. чувак.. ты что???... только тогда переведи свой... ну то что ты написал, на русский..

что-бы админить сеть не нужно ни что такое IP-адрес знать

ты это че? мне предьявил? я что то такое писал?.. тут самое место тебе начать расшифровывать свои хитроходымыслей

кстати все остальное в твоем месадже, тот же выхлоп. не пытайся спорить. что ты тут пытаешься выкать в предьяву, вообще не понятно. когда сформулируешь. приходи. но лучше не надо. тема пустая. бездарь бездаря покрывает

[dmshar]

#, Чувак, да я с тобой и не разговаривал, вообще-то. У тебя точно к вечеру думалка в ауте. Что такое "сарказм" - знаешь такое слово? Вот вспомни, отдохни, расслабся, по утру перечитай еще раз . Может что-то и поймешь. Что-бы тебе легче думалось - еще и процитирую: "вообще, понимать, как сеть работает - излишняя нагрузка" да для системного администратора. Что еще не дошло? Тогда совсем тяжелый случай.

[#]

dmshar,

Чувак, да я с тобой и не разговаривал, вообще-то

да ладно???

[#]

dmshar, ну что же.. я не буду с тобой спорить...
просто для инфы - я только что заскринил ВЕСЬ ТРЕД.. ну.. и если приспичит.. буду скринить и дальше...

вопросы?

ты тут вообще кроме меня с кем то разговаривал? докажи..

[#]

dmshar, .. кроме одной реплики

[dmshar]

#, Виноват, первая моя реплика предназначалась ТС. В ответ на его рассказ о коллеге. Ошибся.

[Сергей Горностаев]

dimon223,

мне коллега пару месяцев назад говорил что математику можно не учить, просто переходить сразу к изучению scikit-learn и других библиотек

[dimon223]

dmshar, какой процесс эксплорер, что ты несешь вобще? знание что такое IP адрес и пакет - это блин база для любого ИТшника, если кому то это нужно обьяснять то я не понимаю что он делает в профессии, это не та теория которую спрашивают на собеседованиях для сетевиков.

[dmshar]

dimon223, Какой апломб. Именно так. И как не знание того, что такое IP-адрес для айтишника, так и не знание математики для Data Science. Ну, что-бы было понятно, теорию вероятностей тоже не спрашивают на собеседовании, но без нее в DS - как на том рисунке выше - только коэффициенты наугад перебирать. Поэтому я и поинтересовался квалификацией коллеги-советчика. Советую вопрос типа "что ты несешь" задать ему.

[dimon223]

dmshar, коллега вполне успешно работает в этой области уже пару лет, вот что он написал:
датасаенс это еще та ебала. Не то что бы плохо иметь понимание и знание аналитики, это очень даже хорошо. Но уметь прогать (нормально) , знать прикладную сферу ( в нашем случае - пусть будут сети) , имхо - ценится норм так выше. Пока мое ощущение что за сети + автоматизацию, платят побольше чем за датасаенс.

если тебя матрица и тензор не пугают и что такое производная ты представляешь - то нет
а если пугают и не представляешь - то тем более забить хуй , может ты конечно молодой и бойкий, но ну его нахуй в 30+ с нуля учить
я 6 лет на физтехе ебашил и то уже все забыл )

Что нужно - получить общее представление
т.е. типы задач, типы алгоритмов
как они приблизительно работают
это теория. ПОтом нужно дохуя практики
практики двух типов - дата инжиниринг (это реально 90 % всей работы). Тут нужен питон + пандас + сиквел
и датасаенс - вот тут тебе нужно взять и поделать разные задания разными алгоритмами, поиграться с ними (уже попутно читая про всякие непонятные параметры в алгоритмах) и получить ощущение как и на что они вляют
т.е. поднять математику на уровень того что ты в голове сможеш сразу представить как вот этот алгоритм крутит матрицу и как оно отличается от вот того алгоритма - это не для нас долбоебов, нам лучше покрутить сами алгоритмы на разных задачах и их прочувствовать

в общем , математика реально ну его нах. Ты там завязнешь на 100 лет , а толку будет 0.

[dmshar]

dimon223, Ну я понял. Вам все понятно. Непонятно при такой уверенности - зачем вопрос-то было задавать.

[dimon223]

dmshar, я этот развернутый ответ получил позже чем задал вопрос на хабре, но даже если бы было не так, интересно сравнить реакцию и ответы. И знаете, я думаю что мой коллега прав, инженер знающий предметную область и практический дата саенс будет гораздо более востребованней чем чистый математик с хорошим знанием тервера и так себе навыками в питоне. Сейчас появляется market demand на дата саенс в области компьютерных сетей, я не думаю что кто то из математиков сможет составить мне конкуренцию, просто потому что в нашей конторе есть такой отдел и мне прямо сказали что у них куча математиков но толку от них как от козла молока.

[dimon223]

dmshar, что еще хотелось бы добавить, года полтора назад я также задавался вопросом научусь ли програмировать и смотрел всякие видео на ютубе где какой то напыщенный хер долго рассуждал о том что нужно быть прежде всего математиком и только после этого можно стать програмистом. я в свои силы после этого видео как то перестал верить, пока не наткнулся на интервью с замечательным человеком Михаилом Портновым на прогблоге, и он там сказал такую мысль, что програмист - это человек который програмирует. Я начал это просто как мантру повторять, и это реально сработало, я к этому времени поучаствовал в нескольких проектах разработки по и могу сказать что если с логикой в порядке то научится этому очень даже можно, тем более что дата саенс именно практическая профессия, а не теоретическая.

[dmshar]

инженер знающий предметную область и практический дата саенс будет гораздо более востребованней чем чистый математик с хорошим знанием тервера и так себе навыками в питоне. А я где-то говорил что DS-аналитик не должне знать предметную область? Вот не далее, как вчера я написал про это в ответе на другой теме:
Что можно добавить в портфолио/резюме DS/ML инженеру?
Но я также считаю, что умение надевать скальпель и белый халат и знать четыре лекарства - не делает из человека врача. Если кто-то прочитал перед сном уголовный кодекс - это не делает из него юриста. Умение вставить в разьем или даже обжать коннектор - не делает из человека сисамдина. Знание синтаксиса языка программирования - не делает из сисамдина программиста. А знание вызовов двух десятков методов из трех библиотек - не делает из программиста специалиста по DataScience.

Впрочем - у каждого свои взгляды. Основанные на его личном опыте в той или иной сфере деятельности. А прислушиваться или нет к этому мнению и какому мнению больше доверять - тоже каждый решает сам. Исходя из своего опыта. На этот раз - просто жизненного.

Answer 1

[Рональд Макдональд]

Безусловно, нужна, без вариантов. Причём высшая, матанализ, дифф-е исчисление, вот это вот всё.

Answer 2

[paran0id]

Датасаенс и есть математика.

Comments

[xmoonlight]

Это сфера гораздо шире, чем просто математика (подразумевая любые вычисления).

Answer 3

[xmoonlight]

Всеми ожидаемый, но неверный ответ: структуры нейросетей, знания языка Python и Tensorflow (tutorials), знания мат.синтаксиса, мат.преобразований, мат.анализа.
------------------------------------

Или вы реально прежде чем написать пару строк кода решаете длинные мат. уравнения?

DS - это анализ имеющихся входных данных для поиска метода извлечения и последующего непосредственного извлечения, из этих данных, необходимого целевого результата.
(специально дописал для "одарённых" интеллектом с рождения).

----------
Я напишу сразу пример задачи для DS.

Есть широкий и глубокий ров (выбраться при падении в него - невозможно).
Есть много коротких веток и водоём.
Вы - по ту сторону, где ветки и водоём.
Задача: перебраться через ров на противоположный край.

Решите - можете думать про DS.

Если подобные задачи ставят вас в тупик, никакой матан в решении задач с DS вам не поможет: зная формулы вы не сможете их применить, чтобы получить искомый результат.

Сказать, что DS - это матан/диффуры/матрицы, это всё равно, что на вопрос: "что такое озеро?" - ответить: "углубление в земле, наполненное водой". Т.е., без конкретики, туда и лужа, и бассейн, и колодец подходят.

PS: И, как видите, здесь нет никаких сложных уравнений и вычислений.

Comments

[notxleb]

Простите меня, конечно, но то что вы ответили, по моему мнению, это полнейший бред. Как и большинство ваших ответов и вопросов на темы в Тостере с хэштегом ИИ (часто натыкаюсь на вас). Про вашу задачу - довольно метафорично ведь, если задуматься широкий и глубокий ров, или просто огромная дыра - это ваше понимание(!= знания, которые возможно у вас некоторые есть, хотя меня гложет сомнение) нейронных сетей, ИИ, машинного обучения, водоём - вода, которую вы льете, а противоположная сторона - действительно интересный вопрос или толковый ответ. Извиняюсь за резкость, но уже больше не могу.

[xmoonlight]

notxleb,

Как и большинство ваших ответов и вопросов на темы в Тостере с хэштегом ИИ (часто натыкаюсь на вас).

ок. Пруф - сюда, и я поясню то, что вам не понятно (я - не буду хамить и высказывть своё мнение).

[notxleb]

xmoonlight, я достаточно смог наблюдать, как вы аргументируете и защищаете свою позицию. Смысла с вами вести спор я не вижу. Скажу лишь то, что вы изрядно побесили и, отчасти, рассмешили меня в вашем вопросе по созданию бота.

[xmoonlight]

notxleb, пруф нужен, пруф!
Скиньте линк на этот мой вопрос.

[dimon223]

xmoonlight,
Товарищь, вы датасаентист? или просто мимо проходили?

[xmoonlight]

dimon223, думайте Головой прежде, чем задавать подобные вопросы.

Если подобные задачи ставят вас в тупик, никакой матан в решении задач с DS вам не поможет: зная формулы вы не сможете их применить, чтобы получить искомый результат.

Сказать, что DS - это матан/диффуры/матрицы, это всё равно, что на вопрос: "что такое озеро?" - ответить: "углубление в земле, наполненное водой". Т.е., без конкретики, туда и лужа, и бассейн, и колодец подходят.

[dimon223]

xmoonlight, я ваш профиль посмотрел и вижу что вы веб разработчик. я против фронтендеров ничего не имею, полезные ребята, я сам написал пару проектов на ангуларе и примерно понимаю с чем вы сталкиваетесь, но вот чего не понимаю так это почему вы лезете со своими советами в сферу где не имеете компетенции?

[xmoonlight]

dimon223, интересно: и как же вы видите по профилю, что я - веб-разработчик, да ещё и фронтендер?

[dimon223]

xmoonlight, 3500+ ответов по темам касающимся веб разработки и 1200 по пхп, по моему все очевидно.

[xmoonlight]

dimon223, :)) я так и думал.
Просто влиться людям проще в более простые сферы, и вопросов, разумеется, по ним - больше. Отсюда и преобладание ответов.

[dimon223]

Bavashi, если вкратце, то это фронтендщик, который притворяется дата саентистом, ему об этом два человека намекнули, но он ему пофиг. Не обращайте внимания на эту бредовую задачу.

[xmoonlight]

Bavashi, подсказка простая: представь, что ты сам попал в эту ситуацию и что бы ты стал делать первым делом? (помощи, других вещей и прочего - ничего нет)
И самое главное: для чего бы ты стал делать то, что стал бы делать?

[xmoonlight]

Bavashi, ну, поздравляю!
Это не решение, но пока, ты единственный лидер!
Все два ответа - имеют смысл (видно, как ты думал), но слабый.
Расширь своё воображение и получишь ответ.