Я хочу автоматизировать процесс создания дампа одной таблицы из MySQL и заливки его на GitHub — какие шаги нужны?

Question

[Роман]

сабж )

Мне нужно в среде Ubuntu Server 18.04:

1. Раз в сутки по cron, либо по факту апдейта MySQL-таблицы делать ее резервную копию (желательно в формате JSON).
2. Размещать ее в виде нового коммита в репозиторий на GitHub.

Как это сделать пошагово?

Какие инструменты лучше использовать?

Я знаком с PHP - мне ее хватит, или непременно нужно знать скрипты оболочки?

Comments

[Сергей c0re]

Версия MySQL какая ?

[Роман]

5.7 вроде.. в общем, дефолтная для убунты 18 какая-то

Answer 1

[Макс]

1. table to json
2. git add ... git commit ...
?

Comments

[Роман]

спасибо, я про такие вещи

mysql> SELECT * FROM passwd INTO OUTFILE '/tmp/passwd.txt'
-> FIELDS TERMINATED BY ',' ENCLOSED BY '"'
-> LINES TERMINATED BY '\r\n';

вообще не знал))

Answer 2

[Сергей c0re]

MySQL 5.7 и выше уже умеет JSON (google)

как пример:

CREATE TABLE employees(id INT PRIMARY KEY, name VARCHAR(45), age INT);
INSERT INTO employees(id, name, age) VALUES (1,'John', 34);
INSERT INTO employees(id, name, age) VALUES (2,'Mary', 40);
INSERT INTO employees(id, name, age) VALUES (3,'Mike', 44);

на SQL Запрос такой будет:

SELECT JSON_PRETTY(JSON_ARRAYAGG(
 JSON_OBJECT("id", id, "name", name, "age", age)
 )) json
 FROM employees

результат:

[
  {
    "id": 1,
    "age": 34,
    "name": "John"
  },
  {
    "id": 2,
    "age": 40,
    "name": "Mary"
  },
  {
    "id": 3,
    "age": 44,
    "name": "Mike"
  }
]

см. пример на dbfiddle

на PHP фетчите запрос, сохраняете в файл в репозиторий.

затем через shell_exec
выполняете
git add ...
git commit
git push

PS: но имхо проще на bash'e написать.

Comments

[Роман]

ну, я на bash ничего сложнее нескольких строчек для cron не писал))

за остальное - спасибо! похоже это именно оно.

[Сергей c0re]

Роман, на bash еще проще, примерно как-то так:

#!/bin/bash

cd /path/to/repository

mysql -u ПОЛЬЗОВАТЕЛЬ -pПАРОЛЬ -D БАЗА_ДАННЫХ -N -B > table_employees.json <<EOF
SELECT JSON_PRETTY(JSON_ARRAYAGG(
 JSON_OBJECT("id", id, "name", name, "age", age)
 )) json
 FROM employees;
EOF

git add table_employees.json
git commit -F table_employees.json -m 'table_employees.json `date +"%Y-%m-%d %H:%M:%S"`'
git push

Answer 3

[Игорь]

А реплика не решит Ваш вопрос? https://ruhighload.com/%D0%9A%D0%B0%D0%BA+%D0%BD%D...

Comments

[Vitaly Karasik]

нет, реплика не бэкап.
пример - мы удалили таблицу по ошибке, значит она удалена и в мастере, и в реплике. Восстановить неоткуда.

[Роман]

интересная ссылка, спасибо, но я несколько о другом)