Почему Ajax перестает обрабатывать запрос?

Question

[winser]

После нажатия на ссылку по событию onclick запускается javascript функция которая с помощью ajax начитает слать запросы по API на внешний сервис в цикле, когда этих запросов не больше 30, то функция успешно завершается и показывает результат в тег в браузере, а когда запросов больше, то в Ajax происходит ошибка срабатывает условие
jqXHR.status === 0 из этой функции

error: function (jqXHR, exception) {
                    var msg = '';
                    if (jqXHR.status === 0) {
                        msg = 'Not connect.\n Verify Network.'+ jqXHR.responseText;
                    }}

И в браузер ничего не выводиться
Хотя в это же время я через PHP пишу ответы которые поступают по API в тхт файл и там все хорошо, то есть к примеру есть 40 запросов к API все они пишутся в тхт, хотя AJAX уже выдал ошибку.

Пробовал делать паузу в php между запросами ничего не изменилось.

Что можно еще сделать ?

Comments

[Максим Ткачев]

ключевое в вашем вопросе - по API на внешний сервис. Смотрите на ограничения кол-ва запросов в вашем внешнем сервисе. Посмотрите заголовки. На вопрос почему скрипт php работает, а AJAX нет - скорее всего кроется в асинхронности запросов.

[winser]

Максим Ткачев, ну так я же написал что ответы через API поступают корректные, если бы по API писало что превышен лимит то понятно, но ответы то приходят правильные и я ставил задержку на php несколько минут по 10 запросов слал ничего не меняется, где то в ajax проблема.
Подскажите как и какие заголовки посмотреть?

[Максим Ткачев]

winser, на сервере в методе где отправляете запрос (CURL ). помимо самого ответа посмотрите заголовки ответа

$out = curl_exec($obCurl);
$info = curl_getinfo($obCurl);

В переменной $info

[winser]

Максим Ткачев,
вот что пишет в последнем хедере это то есть когда ошибка в ajax уже произошла

2022-12-10 08:21:56 res=a:26:{s:3:"url";s:78:"https://api&limit=66";s:12:"content_type";s:16:"ap...";
s:9:"http_code";i:200;s:11:"header_size";i:570;s:12:"request_size";i:401;s:8:"filetime";i:-1;s:17:"ssl_verify_result";i:0;s:14:"redirect_count";i:0;s:10:"total_time";
d:0.50397999999999998;s:15:"namelookup_time";d:0.0041240000000000001;s:12:"connect_time";d:0.12399499999999999;s:16:"pretransfer_time";d:0.36707900000000004;
s:11:"size_upload";d:0;s:13:"size_download";d:4391;s:14:"speed_download";d:8712;s:12:"speed_upload";d:0;s:23:"download_content_length";d:-1;s:21:"upload_content_length";
d:0;s:18:"starttransfer_time";d:0.50394099999999997;s:13:"redirect_time";d:0;s:12:"redirect_url";s:0:"";s:10:"primary_ip";s:13:"68.16.106.59";
s:8:"certinfo";a:0:{}s:12:"primary_port";i:443;s:8:"local_ip";s:12:"82.14.4.96";s:10:"local_port";i:51056;}

[Максим Ткачев]

winser, что вообще должно вернутся? Смущает в вашем запросе LIMIT=66, может у вас реально нет данных для возврата?
Одним словом - у вас проблема (а возможно и нет проблемы) не с AJAX, а на стороне сервера. т.е. если у вас приходит пустой ответ - это не означает что ошибка. Возможно так и есть, и по вашему запросу нет данных

[winser]

лимит 66 идет на все запросы это внутренняя переменная для сервера который принимает апи запрос, то есть тут это не важно.
Ну так ответы же приходят не пустые, я же говорю в тхт после того как ajax выдал ошибку, php продолжает писать ответы от апи и там корректные данные, но в браузер я их получить не могу

[Виталий Артемьев]

Какой браузер?

[winser]

Виталий Артемьев, тестил на хроме и на internet explorer никаких отличий не было

Answer 1

[Виталий Артемьев]

https://docs.diffusiondata.com/cloud/latest/manual...

Браузеры имеют ограничение на кол-во одновременных открытых подключений к одному сайту
Попробуйте на своём сайте включить http2, тогда все запросы будут идти в рамках одного соединения

Comments

[winser]

Ну а разве задержки не решают проблему? если просто сделать sleep после нескольких запросов?
я подключаюсь по curl и уничтожаю подключение каждый раз

[Виталий Артемьев]

winser, Sleep где, в php?

[winser]

Виталий Артемьев, да в php, цикл запросов к API идет в php между ними паузу и все ?

[Виталий Артемьев]

winser, не совсем понял, вы же писали что у вас Ajax, а это значит что запросы идут из браузера

[winser]

Виталий Артемьев, ну да ajax и php
ajax грузит php код который выполняет запрос.
то есть вначале идет клик на ссылку которая вызывает ajax функцию, которая вызывает php код

[Виталий Артемьев]

winser,

javascript функция которая с помощью ajax начитает слать запросы по API на внешний сервис в цикле, когда этих запросов не больше 30

Из этого сообщения я понимаю что
Javascript генерирует 30 запросов

[winser]

Виталий Артемьев, нет сам цикл запросов идет из php
сейчас поставил таймаут 20 секунд после каждого запроса и ajax вылетел с ошибкой уже после 10 запросов то есть именно а ajax как будто времени не хватает
хотя у меня стоит
timeout: 1000000,

вот полный код аякс функции

$.ajax({
                type: "POST",
                url: "ajax.php",
                data: {                    
                    days: days,
                    mydb: mydb
                },
                beforeSend: function () { // Before we send the request, remove the .hidden class from the spinner and default to inline-block.
                    $('#loader').removeClass('hidden')
                },
                cache: false,
                success: function (responce) {
                   // alert("success");
                    $('div[id="Show'+what_to_show+Campaing_id+'"]').html(responce);


                },
                timeout: 1000000,
                error: function (jqXHR, exception) {
                    var msg = '';
                    if (jqXHR.status === 0) {
                        msg = 'Not connect.\n Verify Network.'+ jqXHR.responseText;
                    } else if (jqXHR.status == 404) {
                        msg = 'Requested page not found. [404]';
                    } else if (jqXHR.status == 500) {
                        msg = 'Internal Server Error [500].';
                    } else if (exception === 'parsererror') {
                        msg = 'Requested JSON parse failed.';
                    } else if (exception === 'timeout') {
                        msg = 'Time out error.';
                    } else if (exception === 'abort') {
                        msg = 'Ajax request aborted.';
                    } else {
                        msg = 'Uncaught Error.\n' + jqXHR.responseText;
                    }
                    alert(msg);
                    $('#post').html(msg);
                },

                complete: function (responce) { // Set our complete callback, adding the .hidden class and hiding the spinner.
                  
                    $('#loader').addClass('hidden')
                }
            });

[AUser0]

winser, для начала окончательно определитесь, есть циклы (повторы) запросов в Javascript, или их нет. А то "нет, циклы только в php, но ошибка с циклами - в AJAX " как-то сеет сомнение в адекватности.

Ну и сделайте просто тестовое AJAX-обращение раз 100-200 к какой-нибудь пустой странице, которая будет просто отдавать "OK", и разбирайтесь, сколько запросов совершилось удачно, и почему. А то циклы там, циклы тут, а искать мы будем под фонарём, потому что там светлее.

[winser]

AUser0, Я уже несколько раз сказал что в javascript циклов нет, цикл с запросами через curl идет на php
Сделал запрос к своему сайту который просто отдавал ОК, получил такую же проблему
Ajax вылетел по этому же условию

if (jqXHR.status === 0) {
                        msg = 'Not connect.\n Verify Network.'+ jqXHR.responseText;
                    }

То есть можно исключить проблему на сайте куда идут запросы по API
PHP я исключил в самом начале потому как все запросы из цикла выполняются до конца и отстукивают результаты в тхт

Осталось понять почему Ajax не дожидается окончания запросов и вылетает с ошибкой.
Что еще посмотреть ?

В консоле хрома вот такая проблема есть, о чем это говорит не могу понять
VM140:140 POST link/ajax.php net::ERR_INCOMPLETE_CHUNKED_ENCODING 200 (OK)
ajax @ VM140:140
show_days_stats @ VM142:312
onclick @ campaing_list.php?status=1:1

[AUser0]

winser, тогда вопрос, функция в success хотя бы раз отрабатывает? Или исключительно error? И что происходит в PHP при таком ошибочном запросе, "OK" выдаётся сразу, без пауз? Никто этот ответ не портит? И проверьте запрос-ответ в DevTools браузера, на нормальность.

[winser]

AUser0, функция ajax в success не заходит, она заходит туда только один раз в самом конце если все хорошо
PHP продолжает работать как я написал, то есть я в браузер вижу alert от ajax что Not connect.\n Verify Network.
И в это время
Захожу в тхт а там php продолжает писать ответы после запросов по api через curl
И доходит до самого конца цикла, то есть с пхп все ок, получается ajax думает что какая то проблема с конектом и останавливается

C DevTools браузера плохо знаком, что и как посмотреть ?
Как я написал есть ошибка
Failed to load resource: net::ERR_INCOMPLETE_CHUNKED_ENCODING
и еще когда идет загрузка ajax.php в котором находиться ajax скрипт пишет статус ошибка в тот момент когда получаю ошибку от ajax скрипта
вот скрин https://clip2net.com/s/4hlfnER

[Виталий Артемьев]

winser, через какое время запрос отваливается в браузере?

[winser]

Виталий Артемьев, по ощущениям примерно через одинаковое время каждый раз около 2 минут, если нужно точно могу засечь
Если ставить sleep в php то ajax отваливается на более ранних итерациях цикла, если пхп без sleep то проходит больше итераций цикла, то есть от количества запросов через API ничего не зависит, такое ощущение что ajax какой то свой лимит времени считает и выдает ошибку, но в функции ajax timeout: 1000000, я поставил, если конечно это правильно и я его в нужное место поставил

[Виталий Артемьев]

winser, думаю на стороне браузера ограничение

[winser]

Виталий Артемьев, ну а что делать ? в инете поискал решения в хроме настройки кое какие подправил ничего не изменилось
попробовал в internet explorer тоже само, может другой браузер какой то ? или по хрому есть какие то идеи что поправить ?

[Виталий Артемьев]

winser, задача то у вас какая?

[winser]

Виталий Артемьев, задача делать запросы по API без ограничений условно сейчас зависает на 40 запросах, а мне надо чтобы нормально было когда 700 запросов шлю, если ограничения по API то просто задержки делаю и все, а тут непонятно что делать задержки не помогают

[AUser0]

winser, разбирайтесь с ошибкой ERR_INCOMPLETE_CHUNKED_ENCODING, например есть решения по ссылке.

[winser]

AUser0, ну вот там предлагают выключить антивирус, это я делал и даже запускал на компе без антивируса ничего не поменялось и установить HTTP версии 1.0, а у меня и так судя по phpinfo в конфиге SERVER_PROTOCOL HTTP/1.0

[AUser0]

winser, HTTP/1.0 - это протокол, с которым клиент обращается к серверу с PHP. Именно клиент решает и требует, что бы ему ответили по этому стандарту. Поэтому, если curl пожелает, то он и HTTP/1.1 закажет, и HTTP/2.0 сможет.

А один из вариантов ответа был про права доступа ко временной директории...

[winser]

AUser0, у меня стоит VestaCP и там сложно найти где временная директория nginx но то что я нашел там владельцем был пользователь nginx

как проверить в какой версии HTTP шлет запрос curl ?

Потестил все еще раз на свежую голову и нашел четкую закономерность, ajax выдает ошибку ровно через 90 секунд, то есть не важно какие запросы, какие и где задержки, если запрос превышает 90 секунд вылетает ошибка, php при этом продолжает работать и слать запросы.
Так вот вопрос где этот лимит 90 секунд у ajax или javascript или еще где ?
в гугле нашел такой же вопрос про 90 секунд у ajax без ответа.
По-моему дело именно в этих 90 секундах, скрипт четко выдает ошибку если превышено 90 секунд.

[AUser0]

winser, параметр timeout должен бы справляться с такой проблемой, но видимо браузер на эту настройку плюёт с высокой колокольни. Как вариант обхода: или разбивать AJAX-запросы на несколько мелких (короче 90 сек), или слать ну хоть какой-нибудь текст (хоть 100 пробелов) из PHP в сторону AJAX-а, пока PHP делает свои запросы.

P.S. А все заголовки HTTP можно достать из информации о curl-соединении.

[winser]

AUser0, да я уже тоже так подумал что надо разбивать цикл, но пока не могу сообразить как что то послать из php в процессе выполнения,
то есть схема такая: после того как нажал кнопку и сработал ajax начинается php цикл который работает больше 90, допустим я там отсчитал 30 сек в php, а дальше что? как послать пробел или любой другой символ в ajax чтобы он там в браузере что то написал ?

[AUser0]

Ну так
echo(" ");flush();

Но пока не будет окончательно разорван коннект (или скрипт завершится, или PHP сделает fclose("php://stdin")), AJAX не увидит/не обработает завершение HTTP-запроса (либо success(), либо errorr()).

[winser]

AUser0, ну тогда echo(" ");flush(); бессмысленно делать, вопрос же в том чтобы ajax сам что то вывел в браузер по success и продолжил ждать окончания цикла php

если например разбивать итерации цикла и из success() вызывать другую функцию ajaх которая передаст в php номер последней итерации и php продолжит выполнение с нее, так можно ? Или нельзя вызывать функцию ajax из ajax ?

[AUser0]

winser, вот тут уже не подскажу. В теории можно сделать цикл, в котором проверять, есть сейчас активный AJAX или нет (а в AJAX менять глобальную переменную). Но меня сейчас за это отругают, потому что это совсем некрасивый способ, без эксепшенов, и промисов, и вообще. И встаёт другая проблема, с контролем запущенного PHP-скрипта, в котором делаются множественные коннекты.
Вам проще делать много не AJAX, а простых fetch-запросов, в цикле (синхронно) дожидаясь результата каждого недолгого запроса (меньше 90 сек).

[winser]

AUser0, все решил)
помогло
echo(" ");flush();
ob_flush();

я просто кучу решений пробовал и тут с ошибкой написал echo(" ");flush(); без ob_flush();

Отключил вообще ajax попробовал сделать запрос через PHP и все было точно так же, через 90 сек любой браузер переставал грузиться, то есть тут проблема не в ajax, а в браузерах, даже на firefox где в настройках можно увеличить лимит с 90сек, это не помогает, что странно.

[AUser0]

winser, ну вот, всё удачно разрешилось.