☔︎

Automatisierte Backups

Gute Lösungen erkennen
Beschreibung von Tools
Lösungsbeispiel

1) Clevere Lösungen erkennen

1/3 Clevere Lösung?

1/3 Clevere Lösung? Nein.

1/3 Clevere Lösung?

1/3 Clevere Lösung? Jein.

Eine clevere Lösung

1/3 Eine clevere Lösung

läuft auf Win, Mac, Linux
verständlich und nachvollziehbar
sicher
schnell
Dateisystem-unabhänging
von überall erreichbar
wiederverwendbar
Bedienung per Desktop oder mobil
ggf. kostenlos

1/3 Wahrscheinlich sieht sie so aus

1/3 Z.B.: Die Shell

Automatisierte Backups mit der Shell

— est. 1970

2) Shell-Tools

2/3 Shell-Tools

App

Cloud

2/3 Shell-Tools

/usr/bin

Cloud

2/3 Shell-Tools

/usr/bin

remote@server

2/3 Shell-Tools

2/3 Shell-Tools für Backups

bin	Zweck
bash	Befehle / Automatisierung
ssh	Serverzugang
rsync	Synchronisation
scp	Remote-Kopien
zip	Komprimierung (Archive)
gzip	Komprimierung (Dateien)
mysqldump	Datenbank-Ausgabe
bup	inkrementelle Backups
crontab	Automatisierung
curl	URL Requests

2/3 Shell-Tools für Backups

bin	Zweck	seit
bash	Befehle / Automatisierung	1989 (1971)
ssh	Serverzugang	1995
rsync	Synchronisation	1998
scp	Remote-Kopien	1995 (1982)
zip	Komprimierung (Archive)	1989
gzip	Komprimierung (Dateien)	1992 (1983)
mysqldump	Datenbank-Ausgabe	1995
bup	inkrementelle Backups	2010
crontab	Automatisierung	1970er
curl	URL Requests	1997 (1995)

2/3 Shell-Tools für Backups

bash (Bourne Shell)

breite Unterstützung (winpty)
Debugging mit set -eux
ausführbar als exec() in PHP, Node, Perl …
Bash-Dateien versionieren und wiederverwenden:
Credentials gleich als Variablen anlegen, später per Argument oder Datei-Konfig übergeben

2/3 Shell-Tools für Backups

ssh (Secure Shell)

Schlüsselmanagement via ~/.ssh
Befehle anstoßen:
```
  ssh user@host 'foo.bash'
```
Git-Repos per ssh://… nutzen
-i für Schlüsselpfad
-o StrictHostKeyChecking=no

2/3 Shell-Tools für Backups

mysql

Credentials auslagern:

mysqldump --defaults-extra-file=/path/to/extra.cnf

extra.cnf

[mysqldump]
user=name
password="password"

2/3 Shell-Tools für Backups

zip

Dateiupdates:

zip --update [source] [dest].zip

… inkl. Löschungen (seit 2011):

zip --filesync [source] [dest].zip

3) Lösungsbeispiel

3/3 Backups wovon?

Komponente
1. System, Dependencies, Konfiguration, Themes
2. Content = Datenbank
3. Uploads = Files

3/3 Backups womit?

Komponente	via
1. System, Dependencies, Konfiguration, Themes	Git
2. Content = Datenbank	??
3. Uploads = Files	??

3/3 Sicherungskonzepte Onsite

Inkrementelle Kopien: Z.B. zip -FS, Time Machine, bup
Kopien mit Timestamps (2018-05-01-14h66)
Kopien mit Nummernkreisen (01…12, 01…52, 001…356)

3/3 Sicherungskonzepte Offsite

rsync
bup (via remote)
Cloud-Sync-Dienste
lokale Sync-Dienste, z.B. NAS-Apps

Beispiel

3/3 Beispiel: Backup Onsite

DB per Nummernkreis als Gzip
1malige Files-Version per ZIP
SSH-Schlüssel Offsite-Server

3/3 Beispiel: Backup Offsite

Trigger-Script für Onsite-/Offsite-Sicherung
Crontab …
… oder: PHP-Brücke für curl-Befehl/Trigger
Kopie DB-Nummernkreis per scp, Hardlink „latest“
Kopie & Nummernkreis Files per scp, Hardlink „latest“
FTP-Zugang DB-Kopien

3/3 Beispiel: DB-Backup 1/2

#! /bin/bash
set -eu
day=$(date "+%j")
filename="hostdb-day${day}.sql.gz"
remotedir="/www/var/project/db-dumps"

ssh -o StrictHostKeyChecking=no user@host.com 'mysqldump --defaults-extra-file=/path/to/extra.cnf dbname | gzip > '"${remotedir}/${filename}"
…

3/3 Beispiel: DB-Backup 2/2

…
localdir="../www-private/db"

mkdir -p "${localdir}/archive"
scp -q user@host.com:/"${remotedir}/${filename}" "${localdir}/archive"

ln -f "${localdir}/archive/${filename}"  "${localdir}/latest.sql.gz"
echo "${localdir}/archive/${filename}"

Dankeschön

… und nicht vergessen:

Backups testen!

Fragen?

feedback@stolzenhain.net