GlusterFS
GlusterFS ist ein verteiltes Dateisystem, das Speicherelemente von mehreren Servern als einheitliches Dateisystem präsentiert. Die verschiedenen Server, auch Cluster-Nodes (englisch node ‚Knoten‘) genannt, bilden eine Client-Server-Architektur über TCP/IP. Als Besonderheit können NAS-Systeme über Infiniband direkt in den Cluster eingebunden werden, auch eine redundante Anbindung von Speichermedien über TCP/IP, Infiniband Verbs oder InfiniBand SDP (Socket Direct Protocol) ist möglich. Die Daten auf allen Cluster-Nodes können gleichzeitig gelesen und geschrieben werden, wobei alle Änderungen an Dateien auf allen Servern augenblicklich umgesetzt werden. Das Dateisystem wird über ein FUSE-Kernel-Modul eingebunden und wird von POSIX-fähigen Betriebssystemen unterstützt, zum Beispiel Linux, FreeBSD, OpenSolaris und Mac OS X. Um einen GlusterFS-Server zu starten, wird kein Kernel-Modul benötigt. Ein Server kann sowohl Client als auch Server gleichzeitig sein. Ein Client für Windows-Systeme ist in Planung, wird aber von den Entwicklern erst umgesetzt, sobald das WinFUSE-Projekt stabil läuft. Die Entwicklung von GlusterFS begann Mitte 2005 durch das GlusterOS-Entwicklerteam von Z Research Inc., ein erstes Release des Dateisystems wurde im Juli 2006 veröffentlicht. GlusterFS ist unter der GPL in Version 3 lizenziert. Die Entwickler bieten kostenpflichtigen Support an. Ende 2011 wurde GlusterFS von Red Hat für 136 Millionen US-Dollar gekauft.
GlusterFS ist ein verteiltes Dateisystem, das Speicherelemente von mehreren Servern als einheitliches Dateisystem präsentiert. Die verschiedenen Server, auch Cluster-Nodes (englisch node ‚Knoten‘) genannt, bilden eine Client-Server-Architektur über TCP/IP. Als Besonderheit können NAS-Systeme über Infiniband direkt in den Cluster eingebunden werden, auch eine redundante Anbindung von Speichermedien über TCP/IP, Infiniband Verbs oder InfiniBand SDP (Socket Direct Protocol) ist möglich. Die Daten auf allen Cluster-Nodes können gleichzeitig gelesen und geschrieben werden, wobei alle Änderungen an Dateien auf allen Servern augenblicklich umgesetzt werden. Das Dateisystem wird über ein FUSE-Kernel-Modul eingebunden und wird von POSIX-fähigen Betriebssystemen unterstützt, zum Beispiel Linux, FreeBSD, OpenSolaris und Mac OS X. Um einen GlusterFS-Server zu starten, wird kein Kernel-Modul benötigt. Ein Server kann sowohl Client als auch Server gleichzeitig sein. Ein Client für Windows-Systeme ist in Planung, wird aber von den Entwicklern erst umgesetzt, sobald das WinFUSE-Projekt stabil läuft.
Die Entwicklung von GlusterFS begann Mitte 2005 durch das GlusterOS-Entwicklerteam von Z Research Inc., ein erstes Release des Dateisystems wurde im Juli 2006 veröffentlicht. GlusterFS ist unter der GPL in Version 3 lizenziert. Die Entwickler bieten kostenpflichtigen Support an. Ende 2011 wurde GlusterFS von Red Hat für 136 Millionen US-Dollar gekauft.[1]
Funktionalität
[Bearbeiten | Quelltext bearbeiten]GlusterFS ist modular gestaltet und unterstützt mehrere Betriebsmodi:
- Standalone Storage
- ein einzelner Server, der das Dateisystem über das Netzwerk bereitstellt (ähnlich NFS)
- Distributed Storage
- mehrere Server, die die Daten untereinander verteilt speichern und diese den Clients bereitstellen
- Replicated Storage
- mehrere Server, die die Daten untereinander gespiegelt speichern und diese den Clients bereitstellen
- Distributed Replicated Storage
- mehrere Server, die die Daten untereinander verteilt und gespiegelt speichern
- Striped Storage
- mehrere Server, bei welchen die Daten gestriped werden, um eine höhere Performance und Disk-IO-Bandbreite zu liefern
- Cloud/HPC Storage
- siehe Distributed Replicated Storage
- NFS-like Standalone Storage Server-2
- ähnlich Standalone Storage, es wird mehr als nur ein Dateisystem bereitgestellt
- Aggregating Three Storage Servers with Unify
- drei Server, die ein einheitliches Dateisystem mittels Unify bereitstellen, ohne Redundanz
Modularer Aufbau
[Bearbeiten | Quelltext bearbeiten]GlusterFS bedient sich eines modularen Aufbaus, so dass mit wenigen Komponenten alle beschriebenen Funktionen abgebildet werden können. Die Komponenten sind Datenpartitionen (volumes), Transportgruppen (transport groups) und Übersetzer (translators). Die Übersetzer bieten die Möglichkeit, das Dateisystem um Funktionen zu erweitern, insbesondere ob dieses über Infiniband, TCP oder einer Mischung aus beidem kommunizieren soll, welche physischen Partitionen oder Verzeichnisse eingebunden werden sollen und welche RAID-Level verwendet werden. Zur Veranschaulichung des modularen Konzepts existiert ein ROT13-Übersetzer zum „Verschlüsseln“ des Dateisystems.
Anwendungsmöglichkeiten
[Bearbeiten | Quelltext bearbeiten]Mit GlusterFS lässt sich eine Art Netzwerk-RAID erstellen, von welchem aus mehrere Rechner gleichzeitig auf ein gemeinsames Dateisystem zugreifen können. Es unterliegt hierbei nicht Limitierungen wie der, maximal zwei Server nutzen zu können. GlusterFS ist fehlertolerant, da bei GlusterFS Nutzdaten, Metadaten und Namespace verteilt gespeichert werden können. Durch jeden weiteren GlusterFS-Server erhöht sich der maximale Datendurchsatz des Dateisystems, so dass hier I/O-Bandbreiten von einigen Gigabyte pro Sekunde erreicht werden können.
Bei Prozessoren (CPUs) gilt das Mooresche Gesetz, was jedoch bei Speichermedien und Storage-Lösungen nicht zutrifft, obwohl hier ebenfalls ein Bedarf nach größeren und schnelleren Speichern besteht. Oftmals ist nicht die CPU-Leistung eines Servers der Flaschenhals, sondern immer öfter die zu langsamen Datenspeicher des Systems. GlusterFS schafft hier Abhilfe durch die Möglichkeit, beliebig zu skalieren.
Siehe auch
[Bearbeiten | Quelltext bearbeiten]Weblinks
[Bearbeiten | Quelltext bearbeiten]- GlusterFS Projekt-Homepage (englisch)
- GlusterFS-Dokumentation und Konfigurationsbeispiele (englisch)
- Kurze Einführung und Beschreibung
- GlusterFS und Ceph im Vergleich (ADMIN-Magazin)
Einzelnachweise
[Bearbeiten | Quelltext bearbeiten]- ↑ "Red Hat kauft Storage-Spezialisten Gluster", linux-magazin, 4. Oktober 2011