Как обнаружить взаимосвязь в массиве чисел?

Question

[Влад Лисовец]

Приветствую! Подскажите пожалуйста условную логику в решении вот какой задачи.
Есть массив чисел, например:
1, 32, 58, 2, 64, 17, 25... т.д.
Этих чисел миллионы. Можно ли с помощью скрипта обнаружить в таком количестве чисел некоторые закономерности. Например после 17,25,20, всегда идет следом 5 и т.д. С помощью какого языка это будет легче реализовать.

Comments

[Сергей Соколов]

Что считать минимальной закономерностью?
Кандидаты на закономерность всегда идёт подряд, или могут быть разбросаны по массиву?
Стоит ли за числами какой-то физический смысл, или это случайные?

[Дмитрий Беляев]

Если чисел действительно много, то возможно имеет смысл посмотреть в сторону сверточных нейронных сетей

[Сергей Соколов]

VicTHOR, какой минимальный «смысл» ищем? Например, мой хрустальный скрипт обнаружит, что «все числа связаны одним свойством: они все вещественные!» (целые неотрицательные). Я могу получить премию за такое открытие?

[Влад Лисовец]

Лентюй, Есть история котировок валюты из промежутка 10 лет (условно). Значений этих котировок миллионы и более. Числа всегда находятся в одном "коридоре" границ. Т.е. за 10 лет не было котировки ниже стоимости равной 5 и выше 11, например.
На массиве данных этих котировок и будем искать закономерности движения цены.

[origami1024]

Дмитрий Беляев, сверточные сети вообще выкидывают большое кол-во информации в pooling слоях, находить закономерность они могут только в статистическом смысле верную. То есть, например, из исходных данных 1, 4, 6, может найти закономерность 1, 3, 6, потому что часть исходных данных была потеряна и понята по другому

[Влад Лисовец]

VicTHOR, он есть. Мне нужно добавить ему дополнительной информации для принятия решения.

[Роман]

Влад Лисовец, используй методы статистического анализа (различные корреляции, законы распределения, частоты и прочее) и инструменты для оного, такие как statistica, язык R и т.д.

Answer 1

[Дмитрий Дерепко]

Есть 10 чисел (1, 2, 3, 4, 5, 6, 7, 8, 9, 10).
Есть фиксированное количество чисел, которые можно назвать "последовательностью" в текущей задаче. Это число 3, например.
Разбиваете ваш набор чисел таким образом, что у вас получается следующие группы:
[1, 2, 3], [2, 3, 4], [3, 4, 5], [4, 5, 6], [5, 6, 7], [6, 7, 8], [7, 8, 9], [8, 9, 10], [9, 10, 1], [10, 1, 2]
Далее ищите одинаковые группы или похожие на некоторое количество.
Смотрите следующие за ним цифры. Делаете выводы.

----
Таких "кейсов" можно сделать множество. Описываете их и прогоняете на вашем наборе данных, и ищите закономерности в рядах.
Так же можете посмотреть про математические ряды и их сходимость. Может оттуда подчерпнете для себя что-то дополнительное.

Comments

[longclaps]

Этих чисел миллионы.

Есть 10 чисел

Твоя моя не понимай.

Answer 2

[Сергей Соколов]

Пока только по инструментам: порекомендую Python и numpy, pandas, Keras.
Посмотреть, что за данные, порисовать распределения, посчитать статистические характеристики, «поиграть».

Upd. как прогнозировать курс валюты с помощью машоба, пишут, например, в работе Foreign Exchange Forecasting via Machine Learning (Stanford, на англ.)