Можно ли передать что-то на обработку в Go из PHP?

Question

[ТёмнаяМатерия]

Всем известно что php довольно медленно работает с текстовыми строками особенно регулярками. Ну с 5.6 по крайней мере дела именно так обстоят.
Для проекта полностью на Go нужен другой вебсервер и вообще другая архитектура проекта.
Можно ли передать с помощью exec() или любых других костылей обработку строк передать языку побыстрее, а потом получить от него готовый результат?
Если не с Go то может с питоном такое прокатит и как в этом случае организовать отправку <-> получение?

Answer 1

[evnuh]

zeromq.org

Answer 2

[spotifi]

Неужто не существует для PHP модулей обработки регулярных выражений в native binary code? Да быть этого не может.
Будет и проще и эффективнее на порядок.

Comments

[ТёмнаяМатерия]

Ну я о них даже упоминаний не слышал, есть всякие расширения на С под конкретные задачи и иногда исключительно узкого значения

[spotifi]

ТёмнаяМатерия: регулярные выражения 100% должны быть.

[spotifi]

ТёмнаяМатерия: то что вам советуют - это для когда вы серьезный функционал хотите вынести. а какую-то там регулярку - ищите модуль для PHP. не может его не быть.

Answer 3

[Maa-Kut]

Советую задаться вопросом: у вас настолько много текстовой обработки и она настолько сильно тормозит? Дело в том, что вызов чего-либо exec'ом и или через предложенный тов. evnuh ZeroMQ - штука отнюдь не бесплатная. Есть серьезный риск, что накладные расходы на обращения к внешним программам перекроют все выгоды.

Иными словами, если у вас там просто накапливается большой пул строк, которые можно одним пакетом передать на внешнюю обработку - есть смысл париться. А вот если ваша цель - заменить кучу разбросанных по коду preg_match'ей (или что там в пыхе) на свою функцию, "ускоренную" Go или Python'ом, то не советую.

Comments

[ТёмнаяМатерия]

У меня как раз пул большой на много миллионов строк и каждую надо проверить по 86 регуляркам

[Maa-Kut]

Тогда любая очередь (ZeroMQ, RabbitMQ) плюс внешний обработчик на чем-то быстром. Не уверен, что питон будет сильно быстрее, так что сразу брать что-то компилируемое и многопоточное (Go, .NET, Java, C++, наконец :)).

[evnuh]

ТёмнаяМатерия: если у вас только регулярки, то PHP использует PCRE - библиотеку, написанную на С. Так что скорее всего ваши регулярки в PHP работают и так очень быстро. Чтобы проверить, стоит ли кидать миллион строк между процессами - сначала проверьте на двух языках время, за которое оно эти регулярки на миллионе строк отрабатывает.

Answer 4

[Александр Аксентьев]

Зачем вообще что-то куда-то передавать, тогда уже обрабатывайте на го/питоне/чем угодно.

PHP-то зачем сюда вмешивать в таком случае? Вместо выигрыша получите еще медленнее решение, только сложнее в два раза.

Ну, а если прям очень хочется делать кашу, то поднимите на GO небольшой вебсервер который по http принимает запросы на обработку и отправляйте туда запросы из PHP.

Comments

[ТёмнаяМатерия]

С удовольствием. Вот ещё разобраться бы как вебсервер на Go поднять ))

[Александр Аксентьев]

ТёмнаяМатерия: https://golang.org/pkg/net/http/

[ТёмнаяМатерия]

Александр Аксентьев: Ахах )) Не спасибо, на самом деле супер, я месяц только этот вебсервер изучать буду как сделать и умру не дойдя до самого приложения ))

[Александр Аксентьев]

ТёмнаяМатерия: как же вы собрались на GO писать обработку 86 регулярками, если не умеете в го?)
В общем вам видимо на freelansim.ru

[ТёмнаяМатерия]

Александр Аксентьев: Ну просто одно дело написать небольшой обработчик строк освоив только нужные функции языка и совсем другое свой вебсервер ))

[Александр Аксентьев]

ТёмнаяМатерия: вебсервер делается в 10 строк, не считая обработки запросов, которая и есть ваш обработчик, который вы собрались писать.