Как запускать код на python из c#?

Question

[Руслан]

Здравствуйте!
Какие есть варианты запуска кода, написанного на питоне, в котором используются такие библиотеки как matplotlib, sklearn, pandas, (и др., привычные библиотеки, написанные на c++), из кода на c#?

При этом необходимо передавать в код на питоне данные и получать обратно результаты вычислений, а так же хотелось бы, чтобы объекты питона имели продолжительное время жизни, такое-же, как и вызывающий код.

IronPython, как я понимаю, не может использовать многие библиотеки питона.

Через командную строку, тоже не вариант, т.к. между вызовами состояние не сохраняется и передавать параметры через стандартные входы/выходы не интересно.

Что еще можно попробовать?

Answer 1

[Deerenaros]

Если IronPython не интересует, то потенциально есть три способа.

1. Можно вызывать python.dll и управлять состоянием интерпретатора дёргая определённые функции. Это не самый простой способ и почти наверняка потребует собственной сборки пайтона, однако имеет некоторые преимущества. Одно из них - наивысшая скорость, так как всё происходит в одном пространстве имён. И полноценный контроль интерпретатора, только разобраться в реализации. Однако есть множество проблем, которые придётся решить: GIL, контроль состояния, входные данные и сбор результатов вычислений.

2. Можно вызывать python.exe и передавать состояние косвенно (stdout/stdin, socket, shared memory), перебрасывая объекты через примитивы, например, этим. Однако, из сложностей, придётся написать горстку кода на python и быть готовым к ограничениям. Здесь также и упомянутые longclaps микросервисы.

Но если IronPython вызывает интерес, то можно на .NET реализовать всё необходимое, или же использовать готовое. На самом деле, здесь даже немного приветливее смотрится тот же F#, да и вообще платформа у мелкомягких во многом поразительна.

Comments

[Руслан]

Спасибо.
Пока что только вызов python.exe мне понятен, но в этом случае после вызова питонов скрипт завершиться и все его переменные будут безвозвратно потеряны. можно, конечно, между вызовами сохранять состояние pickle'ом, но это как то не серьезно, мне кажется, и медленно.

[Deerenaros]

Руслан: Так поэтому и говорю, что потребуется какой-то стейт менеджемент. Не обязательно сохранять пиклом, можно вполне повиснуть в скрипте ожидая указаний из сокета или стандартного потока ввода. Это не самый опрятный способ, но самый простой и один из самых популярных. Чуть больше поиздевавшись над здравым смыслом можно использовать разделяемую память (shared memory) с помощью какой-либо библиотеки, там можно будет и очереди сотворить, и конкурентную многопоточность, но сложность возрастает в разы. И венцом, конечно, можно тупо загрузить dll пайтона и дёргать функции из него (там ведь есть функции, верно?), но это самое сложно, хотя и самое правильное. Реализаций не нашёл, видимо нет такой необходимости.

В любом случае, pickle не медленный. Вообще ни разу. Это обёртка над struct, а она целиком сишная, очень быстрая. Гарантирую. Хотя это самый... Неудобный способ, использовать только как сэндбокс. Ну, советую.