Возможно ли применение big data в девелоперских проектах?

Question

[Elarta]

Уважаемые специалисты, есть большой интерес попробовать применить методологию big data в глубоком оффлайне, а именно анализе потенциала территории исходя из статистики ВЭД, Росстата, данных налоговой службы и т д. Я сама не программист, а маркетолог, но мне очень интересна эта идея и возможность разработки такого инструментария для диссертации.
Соответственно вопрос, это вообще возможно? Насколько это решение с нуля или есть какая то база?

Answer 1

[sim3x]

Есть с 0
Есть готовые

Если достанете все данные сами, то можно что-то думать
Бигдата тут не при чем, но инсайды и какую-никакую аналитику даже из таких бд выжать можно

Если хотите предложить кому-то работу, то freelansim.ru

Comments

[Elarta]

Не могли бы вы пояснить, почему это не относится к big data? Например нужно проанализировать существующий инвестиционный профиль (какой бизнес в каком объёме и во что вкладывается и насколько у него эффективна отдача) в Сибири, чтобы спрогнозировать тренд для конкретного инвестиционного проекта при локализации по субъектам или даже районам. Для этого нужно поднять отчётность лет за 15 хотя бы, и обучить машину.
Вопрос по данным - их нужно как то специальным образом готовить или пдф налоговых деклараций тоже подойдут?
И вопрос по работе - от какого уровня вообще имеет смысл начинать разговор?
Вообще за ссылку на какой-нибудь ча.во для чайников буду признательна.
Вот это читала уже, ответов не нашла bizobj.ru/needbigdata@

[sim3x]

Elarta:
>Вообще за ссылку на какой-нибудь ча.во для чайников буду признательна
www.ibmbigdatahub.com/infographic/four-vs-big-data
Чайникам нужно вспомнить/выучить первый-второй курс матана хорошего тех вуза

>почему это не относится к big data?
нет потока данных
нет большого обьема данных
большая часть данных структурирована

>пдф налоговых деклараций тоже подойдут?
- Подготовить в виде БД

>И вопрос по работе - от какого уровня вообще имеет смысл начинать разговор?
- Вопрос о чем?

[Elarta]

sim3x: вопрос о том, чтобы разработали алгоритм/интерфейс/среду не знаю как это называется, что бы при загрузке показателей проекта из серии вид деятельности по оквэд, объём инвестиций, объём выпуска, была выдача полетит проект в этом городе или нет. Либо наоборот, какого типа проекты могут развиваться на территории с требуемым сроком окупаемости.
Это вообще решаемая задача или моя фантазия?
Просто история про big data при выдаче банковских кредитов, мне кажется очень родственной

[sim3x]

Elarta: для однотипных проектов, которых в обучающей выборке должно быть десятки-сотни тысяч - да

Чем меньше выборка - тем хуже прогноз
Про окупаемость там придется написать пару докторских, чтоб отсеять случаи "успешный бизнесс потому что папа губернатор"

Кредиты - имеет весь набор VVVV. Там позитивная динамика = большинство кредитов возвращаются.
В бизнессе год переживает только 5% начинаний