Skapa inkrementella och krypterade säkerhetskopior med dubbelhet

Översikt

Även om Vultr har ett backupsystem för hela systemavbildningar, fungerar detta på blocknivå och kräver att säkerhetskopian återställs till en virtuell dator innan data kan återställas. Dessutom lagras säkerhetskopior endast under en kort tid och ger inte en verklig inkrementell säkerhetskopieringslösning.

Enter Duplicity - Duplicity bygger på den legendariska rsync och ger möjligheten att lagra inkrementella säkerhetskopior tillsammans med kryptering av data i vila via GPG. Den är Posix-kompatibel och överför endast deltas mellan backupkörningar, vilket minskar det totala bandbreddskravet.

Att sätta upp miljö

Terminologi

• Källvärd - Server som kommer att säkerhetskopiera sina data. För den här handledningen har den IP-adressen: 10.1.10.1
• Backup-värd - Destinationsserver för säkerhetskopiering. För den här handledningen har den IP-adressen: 10.1.10.2
• /backupdir - Källkatalog på källvärd som används för säkerhetskopiering i den här handledningen. Du kan ändra detta för att matcha din miljö.
• /destdir - Destinationskatalog på backup-värd som används för säkerhetskopiering i denna handledning. Du kan ändra detta för att matcha din miljö.
• Fullständig säkerhetskopia - Hela kopian av källdatauppsättningen.
• Inkrementell säkerhetskopiering - Kopia av alla ändringar som gjorts sedan den senaste säkerhetskopieringen.

Installerar Duplicity

Ubuntu 14.04:

sudo apt-get update
sudo apt-get install duplicity python-paramiko

CentOS (kräver EPEL):

sudo yum install duplicity python-paramiko

Ubuntu 12.04/Debian 7:

sudo apt-get update 
sudo apt-get install ncftp python-paramiko python-pycryptopp lftp python-boto python-dev librsync-dev
wget https://launchpad.net/duplicity/0.7-series/0.7.02/+download/duplicity-0.7.02.tar.gz
tar xzvf duplicity*
cd duplicity*
sudo python setup.py install

Vi måste installera från källan eftersom Duplicity-paketet inom Debian 7 och Ubuntu 12.04 är trasigt på grund av en förändring i backend-SSH-biblioteket.

Dubbelkolla att Duplicity är installerat genom att köra:

duplicity -v

Det bör returnera följande utdata (versionen kan vara annorlunda):

duplicity 0.6.18

Konfigurera nyckellös autentisering för SSH

Nästa steg är att ställa in certifikatbaserad autentisering för SSH mellan backup-värden och källvärden. Detta gör det möjligt för källservern att SSH till backupvärden utan att skriva in en lösenfras. Vultr har en bra artikel som förklarar hur man gör detta: How Do I Generate SSH Keys .

Säkerhetskopieringar

Kör den första (fullständiga) säkerhetskopieringen

Låt oss köra en fullständig säkerhetskopiering! Detta kommer att skicka en fullständig kopia av data från källservern till destinationen.

duplicity full -v --no-encryption --include="/sourcedir/" --exclude="**" /  ssh://user@backupserver:22/destdir/

Du kan lägga till ytterligare mappar genom att inkludera flera --include="[dir]"uttalanden.

Den --no-encryptionanger att data inte ska krypteras på destinationen. Data kommer att krypteras under transporten när den passerar genom SSH-tunneln.

Det --exclude="**" /alternativet är ett trick för att säkerhetskopiera allt som är bara i inkluderar listan (och inget annat).

Kör inkrementell säkerhetskopiering

Att köra en inkrementell säkerhetskopiering är väldigt enkelt - ändra bara fullflaggan till incrementalflaggan.

duplicity incremental -v --no-encryption --include="/sourcedir/" --exclude="**" /  ssh://user@backupserver:22/destdir/

Automatisering

Skriv automatiserade skript

Att behöva köra dessa kommandon varje gång du behöver en säkerhetskopia är ett drag - tänk om vi hade skript för att hantera det åt oss?

Fullständig säkerhetskopieringsskript

Kör kommandot.

nano /usr/local/bin/backup-full

Lägg till följande innehåll.

#!/bin/bash
duplicity full -v --no-encryption --include="/sourcedir/" --exclude="**" /  ssh://user@backupserver:22/destdir/

Inkrementellt säkerhetskopieringsskript

nano /usr/local/bin/backup-incremental

Lägg till följande innehåll.

#!/bin/bash
duplicity incremental -v --no-encryption --include="/sourcedir/" --exclude="**" /  ssh://user@backupserver:22/destdir/

Gör skript körbara

För att göra skripten körbara, kör följande kommando.

chmod +x /usr/local/bin/backup-*

Nu kan du göra en säkerhetskopiering genom att köra backup-fulloch backup-incrementalinifrån skalet. Ganska cool!

Ställ in cron

Låt oss göra säkerhetskopieringarna automatiska! Genom att ställa in cron för att köra ovanstående skript vid specificerade tider kan vi se till att säkerhetskopieringar utförs med jämna mellanrum.

Kör följande kommando.

crontab -e

Lägg till följande längst ner i filen.

10 01 * * 1,2,3,4,5,6 backup-incremental
10 01 * * 7 backup-full

Detta kommer att köra en fullständig säkerhetskopiering varje söndag kl. 01:10, och kommer att köra inkrementella säkerhetskopieringar varannan dag kl. 01:10.

Restaurering

Godzilla har förstört Seattle och vi måste kunna få tillbaka data från backup-VPS i New York!

duplicity --no-encryption --file-to-restore / ssh://user@backupserver:22/destdir/

Om vi ​​behöver återställa data från 3 dagar sedan:

duplicity --no-encryption -t 3D --file-to-restore / ssh://user@backupserver:22/destdir/

De -t 3Dalternativ medel återställa en säkerhetskopia från tre dagar sedan. Liknande alternativ som -t 1M(för en månad sedan) eller -t 5H(för 5 timmar sedan) fungerar också.