Python+Qt для тяжелых научных расчетов и графики — миф?

Question

[Pi-314]

Привет,

я полный нуб в программировании, но базовые представления имею.
Сейчас нахожусь в роли заказчика разработки ПО.
Пишут софт для визуализации и обработки кривых реальных данных типа (Y,t) с кол-вом точек ±500 тыс.
Все это надо зумить, масштабировать, перестраивать, оперативно крутить, включать одну кривую, отключать другую, выводить в динамике гриды численных расчетов и сейчас все жутко тормозит.

Разработчики выбрали связку Python+Qt4, хотя я чуствовал нутром и говорил, пишите на С++.

Я лоханулся и всего этого не избежать с такой архитектурой в основе?

Answer 1

[sim3x]

В тз укажи желаемые характеристики плавности работы интерфейса и попроси их написать пример работы при большом колличестве данных

Большая часть научного питона и так на си написана - проблем быть не должно
С другой стороны, на чистых плюсах может не быть всего мат аппарата, те у тебя может и будет крутой и плавный интерфейс, но через десять лет, пока они все что нужно на плюсах напишут

Comments

[Pi-314]

договор с ТЗ уже подписан(

[sim3x]

Pi-314: ну так дополни его

[sim3x]

Pi-314:
Какую библиотеку отображение графиков в c++ использовать?
случайно не твой исполнитель?

[Pi-314]

sim3x: дополнить уже не могу

[Pi-314]

sim3x: нет, не мой исполнитель

[Pi-314]

Привет! Выяснилось, что по мнению разработчиков - торомзит не сама отрисовка, а обработчик событий с мышки - мол мышка шлет очень часто сывои координаты и обработчик в pyqtgraph не успевает переварить. Не сталкивались ?

[sim3x]

Pi-314: нет, но я могу написать пачку притензий к ядру винды в таком же стиле

пусть для примера захардкодят движение мышки и покажут тебе 60+фпс отрисовки на полном массиве информации

Answer 2

[Александр]

На связке Python + Qt можно написать то что будет визуализировать данные и довольно таки быстро. У меня есть опыт разработки для визуализации изображений состоящих из 500к точек и выше принимаемых по zmq. При этом использовал библиотеку pyqtgraph. Для изображений выполнялись расчеты среднего, корреляции и и т.п.

Если при обработке где-то не будет хватать производительности, то этот участок вполне можно переписать на С++, а вызывать потом из python.

P.S. Конечно нельзя забывать, что многое зависит от прямых рук разработчиков.

Comments

[Pi-314]

Тут специфика в том, что нужно не просто статически выводить гграфики с 500К точек, но и пользоватлю активно манипулировать с ним. Зумить, двигать по времени и проч.

[Александр]

В pyqtgraph это реализовано из коробки.
Плюс можно добавить ROI, срезы и пр.

[Александр]

В моем случае данные не статические. А приходят с камеры порядка 10-20 кадров в секунду.

[AVKor]

Pi-314: Возник такой вопрос (никак не оценивал, просто в голову пришло; возможно, что и зря пугаю): а если это вообще писюк не потянет? Даже если на ассемблере написать? Не думали об этом?

[Pi-314]

В моем случае немного другое. Уже есть график в 500К. зумлю его на 100% (вполовину) - работает быстро. Пытаюсь сдвинуть весь график по t (т.е. надо как минимум с fps 24 перемещять 500/2 K точек)- лагает просто нереально.

[Pi-314]

AVKor: ой не знаю, у меня станция Xeon 3.2 - 4CPU и 12 Гб ОЗУ, NVIDIA Quadro 2000 - не самая дохлая машина

[Александр]

Компьютер да мощный нужен. Надо в любом случае код смотреть. Без кода сказать что-то не получится. И искать места где происходит затык.

[Pi-314]

Александр: в том и проблема, что у меня не рядовой конфиг ПК, а там, где программа должна будет рабоать - ПК не сильнее текущих офисных решений.

[Александр]

Разработчики у вас еще пишут код, скорее всего оптимизацией не занимались. Поэтому раньше времени паниковать смысла нет, раз уж ТЗ приняли. Если в ТЗ прописаны необходимое время отклика и задержки, то они должны будут сделать так, чтобы им соответствовать.

[Pi-314]

Привет! Выяснилось, что по мнению разработчиков - торомзит не сама отрисовка, а обработчик событий с мышки - мол мышка шлет очень часто сывои координаты и обработчик в pyqtgraph не успевает переварить. Не сталкивались ?

[Александр]

С такой проблемой нет.

Answer 3

[Pi-314]

ну в общем, нашел я на просторах инета обычную программку, которая отображает такие графики ну просто в лет...
а на Питоне у моих дорогих - все тормозит...

Answer 4

[Николай Животенко]

Нет ничего лучше для обработки научных данных чем OriginPro от OriginLab. Его бесплатный аналог - qtiplot.

Comments

[Pi-314]

ну у нас не просто обработка данных. есть специфика