Как пересылать большой буфер между процессом и воркером?

Question

[Алексей]

Есть основной процесс и есть воркер (запущен всего один), из воркера отдаю данные процессу, через process.send, в процессе через worker.on('message',...) получаю.
Проблема в том, что когда в данных появляется большой буфер (тестирую на 20MB) пересылка очень затягивается на 30-40 секунд.
Есть какие-то более быстрые способы передачи данных? Базу использовать не хочется. Может как-то можно нативно записать в расшаренную память?

Comments

[rustler2000]

Чтото намудрил ты - штатный бенчь чуть поправленный для 10М и 20М и на 60сек на 7.9.0 показывает
```
child_process/child-process-read-ipc.js
child_process/child-process-read-ipc.js dur=60 len=10000000: 2,975,849.553027369
child_process/child-process-read-ipc.js dur=60 len=20000000: 976,674.8338392954
```
Машина правда в дрова.

[Алексей]

rustler2000: я правильно понимаю написаное, что буфер 20 мб пролетел за 60 секунд около тысячи раз?

[rustler2000]

Алексей: ну чтото около 15 тысяч раз в секунду - 976674 / 60 ? тут чтото не уверен но явно существенно быстрее чем раз в 30секунд

Answer 1

[Александр Дроздов]

В этой теме не варился, но был опыт обмена данными между приложениями, попробуй связать по юникссокетам

Comments

[rustler2000]

child_process.send и сделан на unix socket. и перф там нормальный если штатные бенчмарки ноды пускать