Питон для инженера?

Question

[Thomas Storm]

Всем привет!

Прошел курсы самообучения питону, и, чтобы полезный навык не пропадал, хочу применять знания на практике.
Хотел бы поинтересоваться у сообщества:
1) Какие инженерные задачи вы решали с помощью питона? Почему не баш/пауэршелл?
2) Есть ли какие-то ресурсы, где можно посмотреть на реализацию питоновских скриптов в администрировании? гитхаб?

Просьба отвечать по существу и не посылать в гоголь.

Answer 1

[xSkyFoXx]

1) Какие инженерные задачи вы решали с помощью питона? Почему не баш/пауэршелл?

Как и любой другой язык общего назначения, практически любую задачу автоматизации можно реализовать на python. Просто наблюдайте за собой и смотрите, что бы вам хотелось автоматизировать в работе или бытовой жизни. Я, например, парсю серверные логи, вычленяю из них ошибки и визуализирую себе это поверх http.

2) Есть ли какие-то ресурсы, где можно посмотреть на реализацию питоновских скриптов в администрировании? гитхаб?

Собственно, Ansible. К тому же он сам написан на python, по этому любые новые плагины или какие-то продвинутые автоматизации вы должны будете писать на python.

Comments

[angru]

в дополнение ко второму

[Thomas Storm]

Благодарю Вас за ответ.

>Просто наблюдайте за собой и смотрите, что бы вам хотелось автоматизировать в работе или бытовой жизни.

Вот тут и начинается самое интересное. Все свои рабочие задачи я решаю на баш. Хотелось бы понять, в каких случаях питон лучше баша и почему??

>Я, например, парсю серверные логи, вычленяю из них ошибки и визуализирую себе это поверх http.
У Вас есть сорс на гитхабе? Хотел бы посмотреть, интересное решение.

[Thomas Storm]

angru: за ссылочку челом бью! Годнота!

[xSkyFoXx]

Thomas Storm
> Хотелось бы понять, в каких случаях питон лучше баша и почему??
Вот знаете, у меня есть коллега, который на столько гуру SQL что практически для любых аналитических задач (а я - аналитик) использует SQL. Даже задач машинного обучения и формирования деревья решений. Даже для финансовой отчётности с очень сложными метриками и коэффициентами. Тут, скорее всего, дело вкуса, привычки и внутреннего драйвера экспериментировать. Если вам нравится bash, вы его хорошо знаете, он позволяет вам быстро и просто решать ваши задачи, вы не очень любите экспериментировать - тогда зачем его на что-то менять?

> У Вас есть сорс на гитхабе? Хотел бы посмотреть, интересное решение.
Простите, но нет. Хотя, например, сборщик логов в SaaS модели я когда-то писал и он несколько лет уже работает в нескольких десятках учреждений - https://github.com/SkyFox/simplelogs

[Валерий Рябошапко]

Thomas Storm: для себя в качестве критерия выбора между Bash и Python я использую необходимость сложной работы с данными и необходимость запуска большого числа сторонних приложений. То есть если нужно два-три грепа и простая конструкция в sed или awk, то вполне хватит и Bash. Если же надо обрабатывать логи хитрыми регулярками, то лучше Python. Но вот запуск по очереди 5-6 приложений, обрабатывающих данные, на Python выглядит как боль, поэтому лучше снова Bash.

Answer 2

[throughtheether]

Какие инженерные задачи вы решали с помощью питона?

Генерация файлов конфигурации для коммутаторов на jinja. Простые веб-интерфейсы (flask, bottle). Парсинг логов и экспортированных данных (lxml). Учет ресурсов (база на sqlite + веб-интерфейс + выгрузка отчетов).
UPD: Забыл упомянуть, генерация трафика при помощи scapy в целях отлова бага.

Почему не баш/пауэршелл?

Проще было написать один раз на python и запускать где необходимо.

Comments

[Валерий Рябошапко]

Генерация файлов конфигурации для коммутаторов на jinja

Круто

Answer 3

[tetafro]

Почему не баш/пауэршелл?

На питоне код гораздо проще и логичнее выглядит. Проще запомнить синтаксис, проще прочитать написанное раньше. Плюс легко пишутся веб-интерфейсы, а дальше делай то же самое, что раньше в консоли, но только мышкой в браузере.

Answer 4

[Александр Афанасьев]

Писал скрипт который скачивает , сортирует по дням неделям и месяцам, удаляет не актуальные бэкапы с устройств Checkpoint. так же писал скрипт который добавлял на 20 коммутаторов строчку в ACL (интересно как эту проблему решают обычно? цисковоркс вроде должен уметь...) и еще много по мелочи.

почему не баш? с бэкапами сначала написал на баше, потом переписал на питоне. как то красивее что ли, проще. да и вообще не умею я баш :D

Answer 5

[des1roer]

чисто админские задачи - бэкап по крону, обработка запросов и разгребание логов

Answer 6

[Дмитрий Вапельник]

для себя писал демона, который собирает статистику о потреблении ресурсов Docker-контейнерами и потом отдает данные Munin-у в виде влагина. Я уверен, что код неидеален ибо я не python-разработчик, а использую его только для своих насущных задач по администрированию https://github.com/dvapelnik/docker-spectator