Как залить свой docker-compose контейнер в яндекс cloud с ci/cd?

Question

[madc0de]

По видео и гайдам везде отдельные image заливаю один с проектом и все. При это миллион действий: залогинится и запушить в Container Registry образ. Создать, зайти в compute cloud, устновить там библиотеки, установить докер, залогинится в нем, запулить и зпустить и тд и тд.

Есть инфа как весь докер контейнер запулить туда и запустить без бубнов ?

Comments

[сергей кузьмин]

разницу между image и container понимаете ?

[madc0de]

Ну image - это образ, наше приложение, которое доступно только для чтения. Когда мы изменили что-то в приложение и заново билдим, создается новый snapshot грубо говоря.

А контейнер уже среда которая собирает их вместе изолируя от самого пк, ну если не пробросить порты. (Виртуальная машина)

Вот я и не пойму, почему нужно в облако заливать image, а не целый собранный контейнер.
На локалке я все делаю через docker-compose, создаю nginx/reactapp/postgre. Линки проставаляю и при зпуске все работает. По факту у меня есть приложение, которое я собираю docker-compose build и запускаю docker-compose up.

Как это точно по порядку запустить в яндекс облаке с ci/cd. Везде в примерах люди один образ собранный через docker через танцы с бубном закидывают.

В сервисах например vercel/heroku и тд. Ты просто подвязываешь гитхаб с проектом, настраиваешь команды запуска и все работает. А тут не понимаю что от куда берется и как лучше. При условии что разные примеры в разных видео.

[mureevms]

madc0de, не верное понимание.
Image - образ, скачанный из докерхаба/регистри или сбилженный самостоятельно из докерфайла
Container - запущенный на хосте образ в котором работает приложение
Для этого даже разные команды в докере

docker ps -a # Список всех контейнеров
docker image ls # Список образов

Т.е. нельзя загрузить контейнер в регистри.
Попробуйте начать описание проблемы с начала. Что есть, что хотите сделать, что сделали и что пошло не так.

[mureevms]

Используйте кнопку ответить, иначе участники не увидят ваших сообщений

[madc0de]

mureevms,
Чего хочу: чтобы мое приложение собранное локально через docker-compose (nginx, react, postgres), запускалось в яндекс облаке и разворачивалось с помощью ci/cd

Что удалось додумать:
1) Через github action я собираю и пушу образы в container registry
2) Логинюсь на ВМ, пулю образы, docker pull cr.yandex/${REGISTRY_ID}/ubuntu:hello
3) И тут проблема, запускается образ с помощью команды docker run cr.yandex/${REGISTRY_ID}/ubuntu:hello
Но у меня 3 образа, запуск которых прописан в docker-compose.yml в проекте. И если я их запущу отдельно через команды, то они не будут работать между собой.

Как быть, куда смотреть?

[mureevms]

madc0de, в Яндексе что именно? Виртуалка (Compute Cloud) или консоль запуска контейнеров (Serverless Containers)?

[madc0de]

mureevms, Compute Cloud с ubuntu (еще создал ВМ с Container Optimized Image 2.3.10)
Но в принципе разницы особой нет
Я не пойму как на ВМ организовать старт контейнера с docker compose.

[mureevms]

madc0de, Для обычного запуска просто скопируйте docker-compose файл на сервер и запускайте как на десктопе, делов-то. Со всеми зависимостями, конечно, если они есть (докерфайлы, конфиги).

[madc0de]

mureevms, суть в том, что я заливаю все н github, от туда через github action нужно это сбилдить и отправить в Container Registry. И тут первая проблема. На локале я все билжу через docker compose(связвая образы между собой линками), а в github action я могу только работать с docker build и отправаить образ один

Далее даже если все 3 образа собрать отдельно и отправить в Container Registry, как на вм их запустить вместе как через docker compose это делается

[mureevms]

madc0de, Или просто копируете docker-compose.yml файл на сервер, убираете секцию build, а в качестве image указываете URL контейнера в вашем регистри, например registry.example.com/image:tag и запускаете как раньше.

Или же попробуйте разобраться как это устроено - читайте документацию для понимания, что линкование это понятие контейнера, нельзя слинковать имаджи. Docker compose это просто удобная оболочка, все тоже самое можно сделать без него. Отдельно билдится каджый контейнер при помощи docker build и каждый отдельно запускается docker run. У последней команды есть ключи при помощи которых можно прокинуть порт, указать переменные, подключить каталог хоста и, внимание, линкануть другой контейнер.

[madc0de]

mureevms, все еще сижу с этой проблемой. Понял, про docker и docker compose. Нашелкоманды линковки и тд.
Сейчас не понимаю одно, почему при запуске контейнера он начинает заново билдить весь проект и говорит что не находит файлы проекта. Зачем тогда билдить сервер.

Почему я делаю docker compose build --no-cache && docker compose up -d. Проект запускается.
Но если я создам пустую папку, как вы описали выше, открою в терминале и в нее скопирую docker-compose файл и напишу docker compose up -d, тогда при запуске будет ошибка


У меня такое чувство, что при docker compose build --no-cache ничего не происходит и сам проект не копируется в образ. Как тогда описать то, что он при запуске начинает заново билдить все и ищет локальные файлы проекта.

Сам Dockerfile

FROM --platform=linux/amd64 node:18.0.0
# FROM node:18

WORKDIR /app

COPY package.json .

RUN npm install

COPY . .

EXPOSE 3000

CMD ["npm", "run", "start"]

И часть docker compose файла

...
services:
  app:
    image: cr.yandex/***/***
    build: 
      context: ./
    depends_on:
      - db
    ports:
      - "3000:3000"
    environment:
      DB_HOSTNAME: db
      DB_USERNAME: postgres
      DB_PASSWORD: postgres
      DB_NAME: postgres
    links:
      - db
    volumes:
      - ./:/app
    networks:
      - awesome
...

[madc0de]

mureevms, в итоге все решилось
В docker compose файле в сервисе app удалил volumes: - ./:/app
Теперь все файлы копируются внутрь образа
И на любой машине передав один docker-compose.yml и введя docker compose up -d пулятся образы и запускаются без ошибок.
Спасибо за помощь!

[nik_the_spirit]

Еще одно решение для CI/CD docker compose: GitHub action, который деплоит контейнеры в COI в Облаке.
Сам экшен: https://github.com/yc-actions/yc-coi-deploy
Репозиторий с примером использования экшена: https://github.com/nikolaymatrosov/yc-coi-github-action

[madc0de]

nik_the_spirit, его и использовал. Спасибо