0x0f80

Во втором варианте вы забыли вернуть результат res.json(), из-за чего data становится undefined. Добавьте return res.json() в первом .then().

Вы обнуляете переменную prev при каждом вызове функции. Используйте замыкание

Чтобы преобразовать массив объектов и переместить свойства из вложенного объекта dates на верхний уровень каждого объекта, используйте метод map() с деструктуризацией.

const newArray = originalArray.map(({ dates, ...rest }) => ({
  ...rest,
  ...dates
}));

Этот код создаст новый массив, где каждый объект содержит все свойства, включая те, что были в dates, на одном уровне.

Проблема в том, что переменная i из цикла for не видна внутри page.evaluate(). Чтобы это исправить, передайте i как аргумент в page.evaluate(), например:

for(let i = 2; i <= 19; i++) {
    let arr = await page.evaluate((index) => {
        let text = document.querySelector(`body > main > div > section > div:nth-child(${index})`).innerText;
        return text;
    }, i); 
    console.log(arr);
}

Проблема в том что вы создаете 1 промис и затем пытаетесь его использовать несколько раз, но этот обьект может быть выполнен или отключен только 1 раз. Можно воспользоваться рекурсией или асинхронной функцией

function exit(n) {
  return new Promise(function(resolve) {
    setTimeout(() => resolve(n), 1000);
  });
}

async function printNumbers() {
  for (let i = 1; i <= 10; i++) {
    let number = await exit(i);
    console.log(number);
  }
}

printNumbers();

Рекурсивно

let n = 1;

function exit(n) {
  return new Promise(function(resolve, reject) {
    setTimeout(() => resolve(n), 1000);
  });
}

function outputNumber(n) {
  if (n <= 10) {
    exit(n).then((num) => {
      console.log(num);
      outputNumber(num + 1);
    });
  }
}

outputNumber(n);