Спрятанные контейнеры docker-compose?

Question

[Вячеслав]

На сервере запущен docker-compose. Есть папка с проектом в которой есть docker-compose.yml, dockerfile и папки проекта. Проект работает - то есть страницы по указанным портам открываются (там контейнеры nginx и janus), в списке sudo netstat -tulpn есть порты эти и процессы. Но если набрать docker ps, docker ps - a, docker-compose ps нет ничего - пустой список. docker info выдает что 0 контейнеров установлено:

Server:
Containers: 0
Running: 0
Paused: 0
Stopped: 0
Images: 0

Я думал, может эти nginx и janus установлены и запущены без докера - но таких пакетов не установлено вообще и в списке процессов их нет - зато есть docker.io и docker-compose

Папка в которой есть docker-compose.yml одна на весь сервер.

Как такое может быть? Человек который работал с этим сервером уволился и возможно применил какую-либо хитрость

Comments

[Valentin Barbolin]

Doker ps в любом случае показывает контейнеры. Может это swager и контейнеры запущены на другой ноде тогда ps не покажет.

[d'Ivan]

то есть страницы по указанным портам открываются

в списке sudo netstat -tulpn есть порты эти и процессы

проверь что показывает sudo lsof -i :80
и по другим портам и отпишись о результатах

[Вячеслав]

Everything_is_not_so_bad,
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
nginx 1400 root 7u IPv4 27424 0t0 TCP *:http (LISTEN)
nginx 1494 systemd-resolve 7u IPv4 27424 0t0 TCP *:http (LISTEN)
nginx 1495 systemd-resolve 7u IPv4 27424 0t0 TCP *:http (LISTEN)
nginx 1496 systemd-resolve 7u IPv4 27424 0t0 TCP *:http (LISTEN)
nginx 1497 systemd-resolve 7u IPv4 27424 0t0 TCP *:http (LISTEN)

[Вячеслав]

эти процессы дочерние от процесса containerd-shim

[Bermut]

Посмотри, что думает на этот счет containerd

ctr namespace ls
ctr container ls
ctr -n <название namespace из первой команды> container ls

Возможно, или докер забыл о существовании контейнеров, или кто-то не по ленился и запустил контейнеры через containerd напрямую

[Вячеслав]

user@ubuntu20:~/janus-gateway$ sudo ctr namespace ls
NAME LABELS
moby

user@ubuntu20:~/janus-gateway$ sudo ctr container ls
CONTAINER    IMAGE    RUNTIME

user@ubuntu20:~/janus-gateway$ sudo ctr -n moby container ls
CONTAINER                                                           IMAGE    RUNTIME
cab7e45ce00b6435191a5af9783cb7ceba00ccaaa39a135ce7c8df8ec581e38c    -        io.containerd.runc.v2
cc4cb54b9f72c559f9e1c0fe30b64f529e173c5fe992de8cf1a0ad77a1c42ca8    -        io.containerd.runc.v2

[chupasaurus]

Вячеслав, картина выглядит так: docker удалил из своей бд контейнеры и их не трекает, а containerd ещё крутит.

[Вячеслав]

Завтра попробую перезагрузить

[d'Ivan]

Я думал, может эти nginx и janus установлены и запущены без докера - но таких пакетов не установлено вообще

Покажи вывод dpkg -l 'nginx*'

[Вячеслав]

Everything_is_not_so_bad,
dpkg-query: no packages found matching nginx*

[d'Ivan]

Вячеслав,
предположим, sudo lsof -i :80 | head выдает что-то типа этого

COMMAND  PID     USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
nginx   1869     root    6u  IPv4  29423      0t0  TCP *:http (LISTEN)
nginx   1869     root    7u  IPv6  29424      0t0  TCP *:http (LISTEN)
nginx   1871 www-data    6u  IPv4  29423      0t0  TCP *:http (LISTEN)
nginx   1871 www-data    7u  IPv6  29424      0t0  TCP *:http (LISTEN)

Здесь номер процесса: 1869
Тогда sudo readlink /proc/1869/exe может вывести такой результат:
/usr/sbin/nginx
Если nginx установлен не со штатного пакета ОС, то, возможно, установлен напрямую или из исходников.

[Вячеслав]

Everything_is_not_so_bad,
Вот так еще попробовал:

user@ubuntu20:~/janus-gateway$ sudo lsof -i :80
COMMAND  PID            USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
nginx   1400            root    7u  IPv4  27424      0t0  TCP *:http (LISTEN)
nginx   1494 systemd-resolve    7u  IPv4  27424      0t0  TCP *:http (LISTEN)
nginx   1495 systemd-resolve    7u  IPv4  27424      0t0  TCP *:http (LISTEN)
nginx   1496 systemd-resolve    7u  IPv4  27424      0t0  TCP *:http (LISTEN)
nginx   1497 systemd-resolve    7u  IPv4  27424      0t0  TCP *:http (LISTEN)
user@ubuntu20:~/janus-gateway$ ps -o ppid= -p 1400
   1356
user@ubuntu20:~/janus-gateway$ ps -p 1356
    PID TTY          TIME CMD
   1356 ?        00:28:00 containerd-shim
user@ubuntu20:~/janus-gateway$

[d'Ivan]

user@ubuntu20:~/janus-gateway$ ps -o ppid= -p 1400
   1356
user@ubuntu20:~/janus-gateway$ ps -p 1356
    PID TTY          TIME CMD
   1356 ?        00:28:00 containerd-shim

Тогда я был не прав. Похоже, таки в контейнере, но Докер о нем не знает.
Любопытно, как будет работать после перезагрузки Линукса.

[d'Ivan]

А что есть в файле /etc/systemd/system/containerd.service, если имеется?
И что показывает sudo ls -lt /etc/systemd/system/*.service | head ?

[Вячеслав]

Everything_is_not_so_bad, тот файл отсутствует

А sudo ls -lt /etc/systemd/system/*.service | head выдает:

-rw-r--r-- 1 root root 551 Feb  1 20:06 /etc/systemd/system/snap.docker.nvidia-container-toolkit.service
-rw-r--r-- 1 root root 486 Feb  1 20:06 /etc/systemd/system/snap.docker.dockerd.service
-rw-r--r-- 1 root root 467 Dec  3  2022 /etc/systemd/system/snap.lxd.activate.service
-rw-r--r-- 1 root root 541 Dec  3  2022 /etc/systemd/system/snap.lxd.daemon.service
lrwxrwxrwx 1 root root  40 Apr  3  2022 /etc/systemd/system/dbus-org.freedesktop.ModemManager1.service -> /lib/systemd/system/ModemManager.service
lrwxrwxrwx 1 root root  31 Apr  3  2022 /etc/systemd/system/sshd.service -> /lib/systemd/system/ssh.service
lrwxrwxrwx 1 root root  36 Apr  3  2022 /etc/systemd/system/dbus-org.freedesktop.thermald.service -> /lib/systemd/system/thermald.service
lrwxrwxrwx 1 root root  38 Feb 23  2022 /etc/systemd/system/multipath-tools.service -> /lib/systemd/system/multipathd.service
lrwxrwxrwx 1 root root  41 Feb 23  2022 /etc/systemd/system/vmtoolsd.service -> /lib/systemd/system/open-vm-tools.service
lrwxrwxrwx 1 root root  38 Feb 23  2022 /etc/systemd/system/iscsi.service -> /lib/systemd/system/open-iscsi.service

[Вячеслав]

Перезагрузил я сервер, но docker ps и docker-compose ps все равно пусты. А сервис janus и nginx запустился

[kolossradosskiy]

С какой целью это было сделано? Саботаж?

Answer 1

[d'Ivan]

COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
nginx 1400 root 7u IPv4 27424 0t0 TCP *:http (LISTEN)
nginx 1494 systemd-resolve 7u IPv4 27424 0t0 TCP *:http (LISTEN)
nginx 1495 systemd-resolve 7u IPv4 27424 0t0 TCP *:http (LISTEN)
nginx 1496 systemd-resolve 7u IPv4 27424 0t0 TCP *:http (LISTEN)
nginx 1497 systemd-resolve 7u IPv4 27424 0t0 TCP *:http (LISTEN)

Тут видно, что nginx работает от root. Наверно, без использования Docker.

Comments

[d'Ivan]

Похоже, работает на связке containerd + runc.

[Вячеслав]

Похоже так и есть:

Команда: sudo ctr -n <Namespace> container ls выдала 2 контейнера

При просмотре инфы:

sudo ctr -n <Namespace> container info <Container ID>

на каждый из них вышло что один контейнер для janus, а другой для nginx