Как исправить entity too large (правил nginx config на 5гб, заюзал bodyParser с лимитом 5гб и файл лоадер тоже 5гб?

Question

[historydev]

Здравствуйте. Вот мой код:

app.use(fileUpload({
  limits: { fileSize: 5000 * 1024 * 1024 }
}));

app.use(bodyParser({
  limit: 5000 * 1024 * 1024,
  extended: true
}));

Nginx config секция http:

client_max_body_size 5000M;

Я 2 дня мучаюсь с 413, сил уже нет, всё перепробовал. Подскажите пожалуйста, что я могу ещё попробовать?
Спасибо.

Comments

[SagePtr]

client_max_body_size нужно брать с небольшим запасом, тело запроса состоит не только из содержимого файла

[historydev]

SagePtr, мой файл от силы метров 200, видео

[historydev]

SagePtr, я уже брал 500 ставил с запасом, психанул 5гб жахнул, 0 толку

[Михаил]

А кто за nginx сидит? Бэкэнд тоже может возвращать 413, надо настройки и на бэкэнде править, не только на nginx

[historydev]

Михаил, а вот здесь можно подробнее? Я с вдс редко работаю, буквально недели две назад узнал что такое pm2. Если вы про то, на чём проект, node.js - если нет, скажите куда мне нужно залезть чтобы дать вам нужную информацию) Возможно вы про операционку - здесь Debian

[historydev]

Михаил, ещё в сайте секция server {} тоже самое повторил, вот здесь прочитал: https://www.vionblog.com/fix-413-request-entity-to....
Не помогло

[Lynn «Кофеман»]

Вам бы для начала выяснить кто именно возвращает 413

[historydev]

Lynn «Кофеман», верно, но я не знаю куда копать

[Михаил]

Владимир, А что в логах nginx?

[historydev]

Михаил, ещё не смотрел, спать думаю уходить уже, часов 20 сижу, сейчас чекну

[historydev]

Михаил, в логах 200 статус онли, 413 нет вообще по поиску

[Михаил]

Владимир, не верю. Ищите ошибку в логах nginx. Смотрите error.log, а не access.log

[historydev]

Михаил, да, вы правы, вот что я получаю:

2022/04/11 03:49:44 [emerg] 35815#35815: "client_max_body_size" directive invalid value in /etc/nginx/nginx.conf:20

[Lynn «Кофеман»]

Да. Пожалуй 5000 месяцев это странное значение :)

[historydev]

Lynn «Кофеман», везде написано значение в примере - 100M

[historydev]

Lynn «Кофеман», мне указывать метры, байты или что? Я поставил сейчас 5000M везде, где нужно, ошибок в логах nginx нет, ошибок в логах pm2 нет. Но я всё ещё получаю 413

[Lynn «Кофеман»]

так всё-таки кто же отдаёт 413?

[historydev]

Lynn «Кофеман», я убрал букву как вы сказали и 413 отдаёт nginx

[historydev]

Lynn «Кофеман», Вот подробнее:

2022/04/12 12:19:29 [error] 42163#42163: *536 client intended to send too large body: 137880 bytes, client: CLIENTIP, server: MYDONAIN, request: "POST /connectors/index.php HTTP/1.0", host: "MYDONAIN", referrer: "ht

В файле сервера MYDOMAIN:

upstream php {
        server unix:/run/php/php7.4-fpm.sock;
}

#server {
#       listen 80;
#       listen [::]:80 ipv6only=on;
#    server_name MYDOMAIN;
#    return 301 https://$host$request_uri;
#}

server {
    #root /var/www/html;
    #index index.html index.htm index.nginx-debian.html;
    server_name MYDOMAIN;
    client_max_body_size 5000;
    #location / {
    #    try_files $uri $uri/ =404;
    #}

    # This is optional - if you want a customized 404 error page
    #error_page 404 /404.html;
    listen 80;
    #listen [::]:443 ssl ipv6only=on; # managed by Certbot
    #listen 443 ssl; # managed by Certbot
    #ssl_certificate /etc/letsencrypt/live/MYDOMAIN/fullchain.pem; # managed by Certbot
    #ssl_certificate_key /etc/letsencrypt/live/MYDOMAIN/privkey.pem; # managed by Certbot
    #include /etc/letsencrypt/options-ssl-nginx.conf; # managed by Certbot
    #ssl_dhparam /etc/letsencrypt/ssl-dhparams.pem; # managed by Certbot

    location /socket.io/ {
        proxy_pass http://localhost:3001;
        proxy_http_version 1.1;
        proxy_set_header Upgrade                $http_upgrade;
        proxy_set_header Connection             "upgrade";
        proxy_read_timeout                      86400;
        proxy_set_header Host                   $host;
        proxy_set_header X-Forwarded-For        $proxy_add_x_forwarded_for;
        proxy_set_header X-Real-IP              $remote_addr;
    }

    location /video/ {
        rewrite /video/(.*) /$1  break;
        proxy_pass                              http://localhost:3001;
        proxy_pass_header                       Server;
        proxy_set_header Host                   $host;
        proxy_set_header X-Forwarded-For        $proxy_add_x_forwarded_for;
        proxy_set_header X-Real-IP              $remote_addr;
        client_max_body_size 5000;
    }

    location / {
        try_files $uri $uri/ @rewrite;
        index index.html index.php;
    }
    location @rewrite {
            rewrite ^/(.*)$ /index.php?q=$1;
    }
    location ~ \.php$ {
            try_files $uri =404;
            fastcgi_split_path_info ^(.+\.php)(.*)$;
            fastcgi_pass  unix:/var/run/php/php7.4-fpm.sock;
            fastcgi_index  index.php;
            fastcgi_param  SCRIPT_FILENAME  $document_root$fastcgi_script_name;
            include fastcgi_params;
            fastcgi_ignore_client_abort on;
            fastcgi_param  SERVER_NAME $http_host;
    }
}

[Lynn «Кофеман»]

Владимир, хорошо, теперь верните букву (лучше маленькую 5000m) и перезапустите nginx.

[historydev]

Lynn «Кофеман», вернул, маленькую, рестартнул nginx, пробую видос залить, 5 минут - напишу, запись в реалтайме идёт

[historydev]

Lynn «Кофеман»,

2022/04/12 12:45:05 [error] 42163#42163: *1395 client intended to send too large body: 11447 bytes, client: CLIENTIP, server: MYDOMAIN, request: "POST /connectors/index.php HTTP/1.0", host: "MYDOMAIN", referrer: "htt

[historydev]

Lynn «Кофеман», с маленькой

[Lynn «Кофеман»]

Владимир, Так это ошибка когда у вас client_max_body_size был 5000 байт.

Или нет?

И вообще тут адрес POST /connectors/index.php а не /video/...

[historydev]

Lynn «Кофеман», не уверен, сейчас тестирую, видео 240 секунд прошло и вроде предыдущее 500+ секунд прошло

[historydev]

Lynn «Кофеман», ошибка есть, а что из того что в файле относится к текущей ошибке? Это?

location ~ \.php$

[Lynn «Кофеман»]

Ну так покажите ошибку, строчку из access.log, дошёл ли запрос до сервера.

[historydev]

Lynn «Кофеман», 5000M это мегабайты, верно?

[Lynn «Кофеман»]

да

[historydev]

Lynn «Кофеман», в access.log последний пропуск 11:41, последняя ошибка по video 12:12, последняя ошибка connectors та, что я скинул, error.log не пополняется больше, но 413 я получаю всё ещё

[historydev]

Lynn «Кофеман», я добавил в эту секцию

location ~ \.php$

client_max_body_size

[Lynn «Кофеман»]

Значит nginx ту ни при чём.
Теперь чините бекенд

[historydev]

Lynn «Кофеман»,

app.use(fileUpload({
  limits: { fileSize: 5000 * 1024 * 1024 }
}));

app.use(bodyParser.urlencoded({
  limit: 5000 * 1024 * 1024,
  extended: true
}));

[historydev]

Lynn «Кофеман», уезжал, извините, вот боди парсер и express-fileupload, я установил по 5гб, как в документации,

[historydev]

Lynn «Кофеман», на бэке ласт ошибка 4:56 утра

[historydev]

Lynn «Кофеман», pm2 logs чисто, nginx чисто, правил php.ini - post_max_size 5100m, upload_max_filesize 5000m, memory_limit 5500m, ошибка всё ещё на месте ахаха, я уже не вывожу) Спать пойду

[historydev]

Lynn «Кофеман», php-fpm логи чистые

[Антон Горецкий]

Владимир, Вы выяснили какого максимального размера файл можно загрузить без проблем? Если к примеру 32мб - то можно забить в поиск по файлам конфигурации это число и искать нужную настройку.

[historydev]

Антон Горецкий, нет, понятия не умею, а как общий поиск осуществить?