Как организовать выгрузку данных на Node.js?

Question

[Михаил Рыбаков]

Есть API на Express.js (база данныз на MongoDB) и клиент - CMS на Angular.js. Необходимо организовать на клиенте выгрузку данных из одной из коллекций (порядка 100к записей) с сохранением в CSV файл. Как лучше реализовать такое?

Answer 1

[Константин Китманов]

Читаем из монги потоком (типа такого: MyCollection.find({}).sort({}).stream()), дальше после нехитрых преобразований либо пишем в файл (тоже потоком) и потом отдаем nginx'ом, либо сразу отдаем браузеру. Первый вариант хорош тем, что результат можно кэшировать да и нджинкс все-таки поэффективнее ноды работает в таких вещах, второй тупо проще.

P.S. в принципе, можно и без стримов — если на серваке памяти много:)

Comments

[Михаил Рыбаков]

А можно подробнее второй вариант?)

[Константин Китманов]

Михаил Рыбаков: типа такого

queryStream.on('data', chunk => res.send(chunk));
queryStream.on('end', () => res.end())

Answer 2

[lega]

С помощью mongoexport можно выгрузить в csv
т.е. запустить процесс, и отправить результирующий файл.