Какие DevOps практики(инструменты) используете для разворачивания инфраструктуры?

Question

[gremlintv2]

Вступление

Привет
Совсем недавно на практике начал использовать инструменты DevOps и примерно представляю что для чего служит
(configuration management (ansible, cheff, pappet, salstack и др.),clouds,git,jenkins,системы мониторинга и логирования,разделение сред на группы dev,testing,staging,prod )
Отчасти я понимаю, что практика DevOps в целом заключается в автоматизации действий, быстром внесении изменений в инфраструктуру, максимально быстром(мультиплатформенном) деплое в новую среду(будь то клауд или голое железо), разработки инфраструктуры для автоматического масштабирования, предоставлении сред под разные задачи ( testing, development, staging, prod) и централизованного максимально детального сбора логов, метрик и service discovery со всего этого добра. К сожалению на данный момент, так как я full-time и один выполняю обязанности Ops, в конторе которая динамично развивается, и до этого не имел представления о том как строится инфраструктура - я не имею целостной картины инфраструктуры - используемой на практике в больших софтварных конторах. Нет никакого Agile, никто даже не ставит задачи, все на словах. На деле, никто не заинтересован внедрять практики DevOps. В общем пока в голове каша. ). Теперь собственно к чему этот набор слов:

Посоветуйте пожалуйста, где можно хотя бы поверхностно (в теории) ознакомится с готовой, рабочей схемой инфраструктуры, чтобы в общем понимать, категории и связку всех инструментов которые используются и в какой последовательности (workflow).

Пример: у меня есть плейбук ansible который разворачивает гит репозитарий на группе серверов, но я примерно понимаю, что скорее всего, у "больших дядек" это делается не через плейбук, а через jenkins + docker + webhook, но на практике взглянуть на такое я не могу :)

Спасибо.

Критика приветствуется и поощряется )

PS

ЗЫ: нет сеньора, который скажет, так никто не делает - потому что так и так... Есть группа dev-ов которым плевать на инфраструктуру так же как и руководству - работает прекрасно, не работает - сам дурак. А мне нужен "experience adviсe"(набитые другими шишки и best practice).

Comments

[Stanislav Pugachev]

На вопрос невозможно дать однозначный ответ

[gremlintv2]

Stanislav Pugachev, дайте неоднозначный ответ. Вопрос не подразумевает ответ "only true/false" )) Или вон то черное, а это белое, или подскажите как мне сделать свой ворпрос "more clear")

[sim3x]

gremlintv2, напишите ваш стек технологий и ОС

[Stanislav Pugachev]

gremlintv2,

для меня ваш вопрос выглядит примерно так:

научите меня жить плз
а то сижу себе тут, дом-работа-дома-работа, всем на все похер )
я вот слыхал что у "больших дядек" там и бизнес свой и крутятся как-то и яхты и шлюхи и казино, но на практике взглянуть на это не могу, а интересно.
где можно хотя бы поверхностно (в теории) ознакомится с готовой, рабочей схемой ?
Спасибо.
Критика приветствуется и поощряется )

[gremlintv2]

Stanislav Pugachev, ) ну ок, посоветуйте, use-case которые сами используете при разработке инфраструктуры, так лучше?))

[gremlintv2]

Stanislav Pugachev, ваше понимание не далеко от истины, по факту), я так понимаю либо подобное было пережито на собственном опыте либо услишано, от подобного мне Ops ? Понимаю что здесь не курилка и не форум по интересам. Но не попытаться рискнуть и нарваться на хейт или флейм не мог.)

[Saboteur]

gremlintv2, Я согласен с Stanislav Pugachev

Нельзя в девопс прийти с неким общим решением для всего.
Решайте одну конкретную задачу, а не "что-нибудь улучшить".

Если ваш ансибл скрипт решает нужное вам разворачивание репозитория - то что вас не устраивает в ансибл скрипте, что вы хотите его изменить?
Хотите чтобы его запускать могли не только вы, но паролей при этом никто не видел - ну можно сделать вебинтерфейс с одной кнопкой через cgi
Можно даже поднять для этого jenkins/teamcity, дать пользователям права запускать джобу, и настроить джобы. Будет и привычный веб интерфейс, и история запусков. Правда немного оверинженеринг использовать CI тулзу только для этого. Вот если она уже используется - тогда да.

Короче: задавайте более конкретные вопросы.

[gremlintv2]

Saboteur,

Нельзя в девопс прийти с неким общим решением для всего.

Пожалуй сохраню) . Спасибо.

Хотите чтобы его запускать могли не только вы, но паролей при этом никто не видел - ну можно сделать вебинтерфейс с одной кнопкой через cgi

И за идею спасибо )

Короче: задавайте более конкретные вопросы.

Вас понял по мере развития обязательно, что-то да спрошу ).
Если конкретно: есть вот эти ребята:
Мне инересно как у них все устроено, чтобы:
а) было целосное представление "а к чему же я стремлюсь",
б) был намечен вектор для развития в наиболее прибыльных и востребованных знаниях для highload-проектов.

Answer 1

[Василий Шахунов]

- Terraform для конфигурации инфраструктуры в облаках + chef для автоматизации.
- На серверах docker swarm для небольших проектов.
- CI/CD на gitlab

Comments

[gremlintv2]

Спасибо

[Василий Шахунов]

gremlintv2, отметьте уж что-нибудь решением))

Answer 2

[Saboteur]

Пример: у меня есть плейбук ansible который разворачивает гитрепозитарий на групе серверов, но я примерно понимаю, что скорее всего, у "больших дядек" это делается не через плейбук, а через jenkins + docker + webhook, но на практике взглянуть на такое я не могу :)

У больших дяденек это и руками может делаться. Нет одного лучшего способа, есть определенные правила игры (бюджет, количество серверов, количество компонентов и стек) - и выбираете себе удобные инструменты.
Тоже использование докера - не всегда оправдано.

Зачастую самые удобные инструменты это не самые лучшие в мире, а те, которые комфротны для вас и разработчиков (но это не значит, что не нужно периодически подучивать новое и пытаться смотреть на свою инфраструктуру незамыленным глазом).

Старайтесь не оптимизировать что-либо, а решать конкретные проблемы, типа "вот тут я трачу еженедельно xx часов на рутину. Имеет ли смысл потратить неделю на оптимизацию и сэкономить потом на этом, или рутина связана с процессами, неподдающимися автоматизации (например из-за бюрократии).

Comments

[gremlintv2]

Спасибо)

Answer 3

[Logout_90]

- Ansible
- Molecule
- Gitlab
Роли правятся разработчиком, прогоняются локальные тесты, пушится все в репу, потом тригерится запуск ci/cd, там тесты прогоняются, MR, code review, тесты, выкатка на прод.