Какие бывают OLAP системы кластеризации данных в БД?

Question

[karenishe]

Необходимо в режиме реального времени анализировать большое количество постоянно меняющихся данных в нескольких таблицах, связанных отношениями.

Мне известно про Microsoft SQL Server Data Mining алгоритмы.

Кто-нибудь сталкивался с подобного рода задачами? Какое решение можете посоветовать?

Answer 1

[kuzemchik]

palo olap, mondrian
Но ни то ни другое не справится если данных действительно много

Comments

[kuzemchik]

oracle olap справится, но это другие деньги

[karenishe]

нужны бесплатные решения, либо дешевые (по цене MS SQL Server пакета с Data Mining)

[kuzemchik]

и то и другое бесплатные (palo olap правда урезанных). Microsoft Analysis Services может дать неплохую скорость, слышал неплохо работает, но не пробовал.

[karenishe]

Спасибо! Будем искать!

[karenishe]

То есть пробовать:)

Answer 2

[karenishe]

Вот нашел еще: www.greenplum.com/
Кто-нибудь сталкивался?

Answer 3

[Antelle]

В MSSQL AS есть кластеризация.
Не совсем понятно, что вы имеете в виду, говоря «в режиме реального времени анализировать большое количество постоянно меняющихся данных». Кластеризация — это алгоритм, который вы сначала обучаете на какой-нибудь большой выборке, а потом применяете к данным. Чтобы переобучить (то есть, заставить его переопределить критерий кластеризации — правило, по которому объект относится к какому-либо из кластеров), запускаете алгоритм снова. Имея такое правило, алгоритм может сказать, к какому кластеру принадлежит объект (в терминах mssql это называется prediction и выполняется на MDX вот так).

Comments

[karenishe]

Говоря в терминах MS SQL, есть понятие OLAP — как я понимаю, это анализ данных в режиме реального времени. Анализировать можно по-разному, например объединять материалы в кластер. Для этого в MS SQL предусмотрены Data Mining алгоритмы.

Есть желание не связываться с MS SQL, но решить те же задачи.

Answer 4

[Арександр]

смотрите в сторону продуктов CEP например www.datameer.com