А как вы загружаете большой массив данных?

Question

[Николай Семенов]

Ребята, всем привет.

Подскажите подходы загрузки большого массива данных, как их подгружать поэтапно?

Comments

[Максим Тимофеев]

Куда загружать?
В каком виде?
Насколько большие?
На Ваш вопрос можно ответить только так:

data.load({
    skolko: 'mnogo',
    ponemnogu: true,
    podhod: 'universalni',
    dataType: 'daPoherDavayJson'
});

[Николай Семенов]

Максим Тимофеев, куда загружать -> в приложение
сколько -> допустим 10000 или вам как в аптеке?
массив с объектами json

[Максим Тимофеев]

Николай Семенов,
10000 чего? Есть разница это массив чисел или объекты по 3kb каждый. Если есть просадки по скорости, грузите частями, это же очевидно. Сформулируйте проблему. Нет волшебного метода на все случаи жизни. Это не попу подтирать, тут много вариантов, зависимых от условий.

[Николай Семенов]

Максим Тимофеев, я изначально попросил привести пример загрузки по частям, вы тут демагогию развели вплоть до жопы.

[Максим Тимофеев]

Николай Семенов, загрузки чего и куда? Чего попало? Пожалуйста:

$.get('/some-controller/some-action?page=2&limit=1000',function(data){
console.log(data);
});

[Lander]

Максим Тимофеев,

Это не попу подтирать,

Напрасно вы так, Максим. В таком деле тоже сноровка не помешает. :)
А то ненароком вместо туалетной бумаги можно и наждачку взять. Бумага же тоже.

[Максим Тимофеев]

Lander, согласен, плохой пример. Сейчас есть влажная бумага, сухая, трехслойная и т.д. Вариативность.

Answer 1

[levchak0910]

Пагинация
Скролл с подгрузкой
Вот абстрактный алгоритм.
Pеализация упирается в Bаши умения настроить связь back-end <-> front-end

let url = "your/api/endpoint";
let limit = 1000; //chunk size per 1 request
let resultData = [];
function loadChunk(from) {
    ajax(`${url}?limit=${limit}&from=${from}`, function success(chunkOfData) {
        resultData.push(chunkOfData);
        if(chunkOfData.length == limit) loadChunk(resultData.length);
    })
}
loadChunk(0);

Comments

[Николай Семенов]

а если нет ни пагинации, ни скролла

[levchak0910]

Николай Семенов, Вы задали общий вопрос и получили, на него, общий ответ.

а если нет ни пагинации, ни скролла

Тогда это нестандартная ситуация, и что бы получить детальный ответ, опишите свой вопрос подробнее.

[Антон Спирин]

Николай Семенов,

а если нет ни пагинации, ни скролла

если надо подгрузить поэтапно, то необходимо реализовать.

[Егор Казанцев]

Ну сделайте какой-нить индикатор загрузки чтоб пользователь не чувствовал себя дураком и тяните данные порциями или играйтесь с событием progress у XMLHttpRequest.