Конфигурация nginx, ошибка «connection refused»?

Question

[Дмитрий]

Добрый вечер.

Возникла проблема с настройкой проксирования nginx в docker контейнере.
При попытке подключиться к websocket получаю ошибку "NS_ERROR_WEBSOCKET_CONNECTION_REFUSED".

Nginx gateway

server {
   listen 80;
   server_name domain.ru;
   client_max_body_size 300M;
   server_tokens off;

   include /etc/nginx/snippets/certbot.conf;

   rewrite ^(.*) https://domain.ru$1 permanent;

}

server {
    listen 443 ssl http2;
    server_name domain.ru;
    client_max_body_size 300M;
    server_tokens off;

    ssl_certificate /etc/letsencrypt/live/domain.ru/fullchain.pem;
    ssl_certificate_key /etc/letsencrypt/live/domain.ru/privkey.pem;
    ssl_trusted_certificate /etc/letsencrypt/live/domain.ru/chain.pem;

    include /etc/nginx/snippets/ssl.conf;
    include /etc/nginx/snippets/certbot.conf;

    location /ws {
        proxy_set_header  Host $host;
        proxy_set_header  Upgrade $http_upgrade;
        proxy_set_header  Connection "Upgrade";
        proxy_pass        http://websocket-nginx;
        proxy_http_version 1.1;
        proxy_redirect    off;
    }

    location / {
       proxy_set_header Host $host;
       proxy_set_header X-Real-IP $remote_addr;
       proxy_set_header X-Forwarded-Proto http;
       proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
       proxy_set_header X-Forwarded-Host $remote_addr;
       proxy_set_header X-NginX-Proxy true;
       proxy_pass http://websocket-nginx;
       proxy_http_version 1.1;
       proxy_ssl_session_reuse off;
       proxy_redirect off;
    }
}

Websokcet nginx

server {
    listen 80;
    index index.html;
    root /app;
    charset utf-8;
    server_tokens off;

    add_header X-Frame-Options "SAMEORIGIN";

    location /ws {
        proxy_set_header  Host $host;
        proxy_set_header  Upgrade $http_upgrade;
        proxy_set_header  Connection "Upgrade";
        proxy_pass        http://websocket-nodejs:8000;
        proxy_redirect    off;
    }

    location / {
        proxy_set_header  Host $host;
        proxy_pass        http://websocket-nodejs:8000;
        proxy_redirect    off;
    }
}

Docker-compose

version: '3'
services:

  gateway:
    image: ${REGISTRY}/import:gateway-nginx-${IMAGE_TAG}
    restart: always
    ports:
      - "80:80"
      - "443:443"
    volumes:
      - /etc/letsencrypt:/etc/letsencrypt:ro
      - /var/www/html:/var/www/html:ro
    depends_on:
      - backend-nginx
      - frontend-nginx
      - import-rabbitmq
      - websocket-nginx

  websocket-nginx:
    image: ${REGISTRY}/import:ws-nginx-${IMAGE_TAG}
    restart: always
    volumes:
      - ./websocket:/websocket
    depends_on:
      - websocket-nodejs

  websocket-nodejs:
    image: ${REGISTRY}/import:nodejs-${IMAGE_TAG}
    volumes:
      - ./websocket:/websocket
    ports:
      - "8000:8000"
    tty: true

Пытаюсь обратиться к WS из backend сайта

let url = window.location.hostname;
let socket = new WebSocket('wss://' + url + '/ws');

Соединение в WS не происходит.

Как решить проблему?

Comments

[Valentin Barbolin]

Зачем эта прослойка?

websocket-nginx:
    image: ${REGISTRY}/import:ws-nginx-${IMAGE_TAG}
    restart: always
    volumes:
      - ./websocket:/websocket
    depends_on:
      - websocket-nodejs

Попробуй так

location /ws {
        proxy_set_header  Host $host;
        proxy_set_header  Upgrade $http_upgrade;
        proxy_set_header  Connection "Upgrade";
        proxy_pass        http://ws-upstream;
        proxy_http_version 1.1;
        proxy_redirect    off;
    }
upstream ws-upstream {
server websocket-nodejs:8000;
}

[Дмитрий]

Valentin Barbolin, может проблема возникать из-за того, что в конфигах backend-а и websocket-а используется одно и тоже доменное имя?

[Valonir]

при обращении по url резолвинг идет не сразу на DNS сервер, а сначала смотрит локальные записи об именах хостов
и если бекэнд domain.ru (и знает об этом) обращается по url "domain.ru", то 99,9% что он будет стучаться сам к себе

[Дмитрий]

Valonir, тогда можно отказаться от отдельного конфига для WS и просто дописать locacion в конфиг backend-а для WS?

[Дмитрий]

Valonir, тогда можно отказаться от отдельного конфига для WS и просто дописать locacion в конфиг backend-а для WS?

[Valonir]

Дмитрий, подобное уже предлагали выше
Но тут всё зависит от ожидаемого функционала (может не сейчас, а в дальнейшем)
Я бы предложил в конфиг Websokcet nginx добавить
server_name websocket-nginx.domain.ru
А в Nginx gateway
proxy_pass websocket-nginx;
изменить на
proxy_pass websocket-nginx.domain.ru
Т.к. имя websocket-nginx скорее всего вызовет ошибку резолвинга, ибо не соответствует правилам доменных имён
Проверить, что в hosts докера и/или "машины носителя" контейнеров есть запись websocket-nginx.domain.ru с адресом нужного контейнера (можно и на localhost машины с контейнерами, но тогда надо порты разнести в конфигах nginx и compose)
И простым пингом посмотреть на какие ip будет резолвить бекэнд имена websocket-nginx.domain.ru и domain.ru

[Дмитрий]

можно и на localhost машины с контейнерами, но тогда надо порты разнести в конфигах nginx и compose

Valonir, на localhost-e так и сделано, проблем с этим нет. Только на тестовом сервере.
На локальном каждый сервис на своём порту. backend на 8087, а к websocket-у подключаюсь на 8085 и дальше идёт proxy_pass на websocket-nodejs:8000, без дополнительного сервиса websocket-nginx.
Создать поддомен для WS - такая мысль посещала. Но хотелось бы обойтись без этого, по крайней мере попробовать.

[goncharov_german]

Подскажите, так и не удалось разобраться в проблеме? А то у меня аналогичная

[Дмитрий]

goncharov_german, я решил созданием поддомена на рабочем сервере. На локальном работало на разных портах.