Jeff_Parker

Question

Node.js

Средний

Одинаковые запросы fetch получают разные данные?

3 подписчика
более двух лет назад
236 просмотров

1

ответ

Answer 1 · 2022-03-01 11:20:02

Спасибо за внимание к моему вопросу.
После нескольких дней агонии в поисках ответа я понял следующее - произошла небольшая ошибка. При отсутствии данных и появлялись эти самые cancelled запросы. Я сделал ошибочный вывод, что fetch пытается достать данные из этих запросов. Больше, наверное, и нечего сказать...
Мораль: будьте внимательней, не всегда ошибка возникает в коде

Answer 2 · 2022-02-08 16:47:59

Господа эксперты. Приношу свои извинения за ваше потраченное время. Ошибка была найдена в самом подлом месте Ilya Konstantinov, FIREguardSPB, ваши решения были верны
Проблема заключалось в том, что я занимаюсь парсингом, и когда то давно установил Proxifier на свой ПК. Он же из за некачественных прокси не давал мне возможность получить данные в вызовах API, по сему я и получал такие ошибки.

Answer 3 · 2022-03-29 11:19:55

Может вопрос сложнее, чем мне видится, но с этим должен справится node js, а именно модули node-fetch (для реализования запросов к сайту) и cheerio (для парсинга полученного html документа)

const fetch = require('node-fetch')

const fetchFun = () => {
  const request = 'Кроссовки мужские'
  const enCodedreq = encodeURI(request)
  let data = fetch(`https://wildberries.ru/catalog/0/search.aspx?search=${request}`)
}

Answer 4 · 2022-02-08 13:39:27

Имея представление о HTML и CSS не так трудно написать парсер самостоятельно. На ютубе есть пошаговое руководство как это делать (в основном на английском). Там используется модуль Puppeteer node.js

Jeff_Parker

Наибольший вклад в теги

Парсинг

Data science

Node.js

JavaScript

Лучшие ответы пользователя

Одинаковые запросы fetch получают разные данные?

Как передать параметр в экспортированную функцию?

Как реализовать парсер Wildberries по поисковым запросам (ссылки типа https://www.wildberries.ru/catalog/0/search.aspx?search={Запрос})?

Какой программой или сервисом для парсинга лучше воспользоваться?

Лучшие вопросы пользователя

Одинаковые запросы fetch получают разные данные?

Войдите на сайт