Как скачать видео по ссылке используя Node.js?

Question

[CODER541]

Пытаюсь скачать видео в массовом порядке по сcылкам типа:
https://2ch.hk/b/src/178164228/15297765223990.webm

Парсю сайт,ищу линки и пробую скачать по порядку,но проблема в том что загрузка начинается и дропается на 1% проценте
Скачка отдельного видоса идет нормально, но когда есть массив ссылок
тооо все идет не лучшим образом( пункт 2)

for (var i = 0; i < webmlinks.length; i++) 
{
                      	
  	//var tmp = titles[i]
     	  var url =webmlinks[i]
     	 const download = new Downloader();
         download.get(url);
         download.on('done', (dst) => {
                          // download is finished
         });
 }

Что делать и как по фиксить?
Последний раз использовал
етот, только загрузка начинается максимум 1% и обрыв

Пробовал другие модули,, нооо не помогло, даже без модулей пробовал.

Answer 1

[iBird Rose]

https://www.npmjs.com/package/download

Comments

[CODER541]

Етот модуль что все файлы одновременно грузит?

[Anubis]

CODER541, судя по докам, один вызов - один url. Ничто не мешает завернуть сколь угодно вызовов в Promisel.all, опять же, как обрисовано в доках.

Answer 2

[Станислав]

async/await + request-promise + цикл через Promise.all(...) = профит 100%
Сам гружу, только не видое, а тяжеловесные фото, раньше тоже мучался с недокаченными фото (когда с PHP на ноду пересел)

Comments

[CODER541]

можешь в коде оформить, плиз

[Станислав]

CODER541, Ну вот я пример набросал, а там уже кумекай сам

const http = require('request-promise')
    , path = require('path')
    , fs = require('fs')
    , options = {
        uri: undefined,
        headers: { /**/ }
    }

const makeRequest = async () => {
    const videos = await getVideos()
    await uploadVideos(videos)
    process.exit()
}
return makeRequest()
    .catch(e => {
        console.log(e)
        process.exit(0)
})

/**
 * Тут к примеру парсим документ и получаем массив ссылок на видео
 */
function getVideos() {
    return [ 'https://...video', 'https://...video2' ]
}


function uploadVideos(request) {
    return Promise.all(request.map(async (video) => {
        options.uri = video

        return http.get(options)
            .then(e => {
                return fs.writeFileSync(path.join('/var/www/site/upload', 'name_file.mp4'), e)
            })
    }))
}