Node.js что мне нужно, синхронность или асинхронность?

Question

[Topsky]

Приветствую, мне нужно сделать неизвестное кол-во запросов на сервер, до тех пор пока в ответе не будет json-ключа.

request({url:url}, function(err, response, body){
		let data = JSON.parse(body);
		while(data.nextPageToken !== undefined){
			var newUrl = url + '&pageToken=' + data.nextPageToken;
			request({url: newUrl}, function(err, response, body){
				newUrl = url + '&pageToken=' + JSON.parse(body).nextPageToken;
			})
		}
	})

Отправляется первый запрос, получаю nextPageToken, и повторно выполняю запрос, уже с новым полученным pageToken, и так до тех пор пока nextPageToken перестанет возращаться.
Кол-во итераций - неизвестно, ранее код был таким for(var i = 0; i < data.pageInfo.totalResults / maxResults; i++), поэтому и подумал про while, но запросы все выполняются мгновенно, и собственно запрос отправляется на 2-ой запрос.

Так что мне нужно, асинхронность, или синхронность я вот чего не пойму, как бы реализовать адекватно данную задачу?

--UPDATE
Проще и понятнее, нужно выполнить неизвестное кол-во запросов.
Каждый новый запрос будет состоять из части предыдущего запроса, конечное число итераций определяется отсутствием искомого ключа в ответе.

Просто while начинает отправлять кучу сотен запросов на сервер, которые еще не сформированы из ответа.

Answer 1

[Дмитрий Беляев]

node v7.6+ или транспайлим бабелем async2generators

function requestAsync(params) {
  return new Promise((resolve, reject) => {
    request(params, (err, response, body) => {
      if(err) { return reject(err); }
      resolve({response, body});
    });
  });
}

async function getURL(_url) {
  var data, url = _url;
  do {
    const {body} = await requestAsync({url});
    data = JSON.parse(body);
    url = _url + '&pageToken=' + data.nextPageToken;
  } while(data.nextPageToken !== undefined);
  return data;
}

Comments

[Topsky]

А можете объяснить данную конструкцию?
const {body} = await requestAsync({url});

Я попробовал выполнить в консоли хрома это

const {srms} = ()=>{return{resp:1, srms:2}}

По при запросе {srms}, srms равен был undefined, почему?
Если по логике, он должен был быть равен 2.

[Дмитрий Беляев]

А можете объяснить данную конструкцию?

await - оператор ожидания асинхронного вызова (резолва промиса), может использоваться только в асинхронных функциях
const {body} = ... - деструктуризация объекта, из объекта извлекается свойство в одноименную переменную

Я попробовал выполнить в консоли хрома это

У Вас справа от присваивания функция, у которой нет свойства srms, нужно сделать ее вызов, что бы это работало, ну или просто оставить объект

[Topsky]

Зайдите сюда, Youtube API как сделать запрос всех видео с канала?
Любой ответ оставьте из данного кода, ибо вы ответили на тот вопрос, написав тут, отмечу ваш ответ решением.
Очень мне помогли.

P.S
А где можно почитать про фишки JS?
Первый раз слышу о деструктуризации объекта вот таким образом, если не брать в учёт конструкцию delete obj.

[Дмитрий Беляев]

Topsky: https://developer.mozilla.org/ru/docs/Web/JavaScri...

[keslo]

Офигенный пример!

Answer 2

[Topsky]

Есть решение, вот такое

var page = 2,
    lastPage = 100;

async.whilst(function () {
  return page <= lastPage;
},
function (next) {
  request("http://some_json_server.com/data?page=" + page, function (error, response, body) {
    if (!error && response.statusCode == 200) {
      store_data(body)
    }
    page++;
    next();
  });
},
function (err) {
  // All things are done!
});

Но подключается сторонний пакет Async, и хотелось бы без нее как-то обойтись.
Вроде в javascript были async, await, но не особо получается их использовать
await request({}, function(){})