"Datensicherung und Speicherressourcen im URZ"

Nutzerforum am 10. 06. 2009, 13.45 Uhr, Reichenhainer Str. 70, Raum 2/D101

"Datensicherung und Speicherressourcen im URZ"

Inhalt des Nutzerforums ist ein kurzer Überblick über die Technologien des URZ
zur Speicherung von Daten und die Datensicherung (Backup) von Benutzerdaten.
Bitte äußern Sie Anregungen und Wünsche zur Verbesserung der entsprechenden Dienste.

Speichertechnologien im URZ

Ein Vergleich der verwendeten Technologien zur Speicherung und Sicherung von Daten im URZ
erfolgte im Artikel Effektive Datensicherung mit rsync in der Ausgabe 2/2009 der Nachrichten des URZ

Folgende Technologien nutzt das URZ zur Datenspeicherung:

AFS : RW-Volume auf 1. AFS-Server, RO-Volume auf (1. +) 2. AFS-Server
Server mit Daten (Datenbanken, Installationsserver u.a.)
in lokalen Filesystemen (Linux oder Windows)

Datensicherungsverfahren / Backup

Folgende Technologien nutzt das URZ zur Datensicherung: (Wo ist dateix)

CABS : Dump der Daten der AFS-Volumes in UNIX-Filesystem
1. dateix von AFS-Server1 (AS1) nach AFS-Server2 (AS2) (AFS-Kopie RO)
2. dateix von AS2 nach CABS-Dump-Server (CDS) nach folgendem Schema:
```
|(F)|...|D|D|W|...|W|...|F|..|D|D|D|D|W|...|W|...
	  Do. dateix neu  ...  Di. dateix geänd.
F = Fulldump - komplettes AFS-Volume gesichert am Monatsanfang (2x)
W = inkrementeller Dump Level 1 (zu letztem Fulldump) am Wochenende
D = täglicher inkrementeller Dump Level 2 (zu letztem Wochende)
        
```
3. Dump nur wenn Daten geändert wurden
4. Löschen alter Dumps (D|W älter als 4 Wochen; F älter als 2 Monate)
  ein Stand von dateix 2 bis max. 11 mal in Dumps enthalten

AMANDA : Sicherung von Server-Daten aller Struktureinheiten der TU
tägliche Erstellung eines Backup-Files (tar) - wo ist dateix ?

|(F)|...|D|D|F|...|F|...|F|..|D|D|D|D|F|...
	  Do. dateix neu  ...  Di. dateix geänd.
F = Fulldump in der Regel wöchentlich (5x)
D = täglicher inkrementeller Dump Level 1 (zu letztem Fulldump)

ein Stand von dateix 5 bis max. 11 mal in Dumps enthalten

RSYNC : Sicherung von Server-Daten aller Struktureinheiten der TU
Nutzung der freien Software rsync (Basis ist Datenmirror)

|(F)|...|D|L|L|L|L|L|L|L|L|L|D|L|L|L|L|...
	  Do. dateix neu  ... Di. dateix geänd.
D = Datei nur gesichert, wenn neu oder geändert, sonst Links

flexible Aufbewahrungszeiten: 28 Tage; 12 Wochen; 6 Monate

Benutzerzugang zu Daten und Backup

Nutzer können auf die Datensicherungen Online zugreifen:

AFS/CABS: per WFM
Artikel in Mitteilungen des URZ 2/2009
AMANDA: per WEB-Restore-Portal weramba
RSYNC : lokaler Zugang von gesicherten Servern per NFS/SMB

Ressourcennutzung im URZ

Übersicht über genutzte Ressourcen eines Nutzers in MyURZ

aktuell vorhandene Speicherressourcen des URZ (Wertangabe in TB = Terrabyte = 1000 GB):

Server-Typ	Anzahl	Kapazität	belegt
AFS	13	135	39
CABS	6	38	25
AMANDA	7	42	9.5
RSYNC	3	6	2.5

die AMANDA-Ressourcen werden bis Ende des Jahres so weit wie möglich reduziert
und im nächsten Jahr entweder gelöscht oder auf ein Minimum reduziert.
Die dort laufenden Backups werden schrittweise auf RSYNC umgestellt (Einsparung)

Was sagen Sie ?