Aktuell geht das Thema Cluster Filesysteme durch die Presse. Oracle erwartet die Aufnahme seines OCFS2 in den Linux Kernel und RedHat bewirbt sein GFS in Fedora Core 4.
Typischer Einsatzzweck eines Cluster Filesystems ist das Number Crunching (High Performance Computing) für die Lösung von Simulationen oder Mathematischen Berechnungen im Bereich Forschung oder Engeneering. Dabei teilen sich viele Rechner-Knoten die Eingangsdaten und Berechnungsergebnisse. Jedoch auch kommerzielle Enterprise Systeme skalieren zunehmend in die Horizontale. Datenbanken, Fileserver und Application Server Cluster benötigen den Zugriff auf gemeinsame Datenbestände.
Ein Cluster Filesystem soll den gleichzeitigen direkten Zugriff von mehren Knoten eines Clusters auf die selben Files ermöglichen. Im Gegensatz zu Netzwerk Filesystemen erfolgt dabei der Datenfluss direkt zwischen den Knoten um Cluster und der Storage Hardware. Zum Einsatz kommen FC SANs. Kleinere Installationen können auch mit SCSI Storage Enclosures realisiert werden die mehrere Host Adapter erlauben. Für Test und Entwicklung lassen sich auch Firewire Lösungen einsetzen. Ganz aktuell boomt auch der IP basierende Block Zugriff. Mit iSCSI oder diversen Linux Netzwerk Block Devices kann hier eine Gigabit Ethernet eingesetzt werden.
Typischer Einsatzzweck eines Cluster Filesystems ist das Number Crunching (High Performance Computing) für die Lösung von Simulationen oder Mathematischen Berechnungen im Bereich Forschung oder Engeneering. Dabei teilen sich viele Rechner-Knoten die Eingangsdaten und Berechnungsergebnisse. Jedoch auch kommerzielle Enterprise Systeme skalieren zunehmend in die Horizontale. Datenbanken, Fileserver und Application Server Cluster benötigen den Zugriff auf gemeinsame Datenbestände.
Ein Cluster Filesystem soll den gleichzeitigen direkten Zugriff von mehren Knoten eines Clusters auf die selben Files ermöglichen. Im Gegensatz zu Netzwerk Filesystemen erfolgt dabei der Datenfluss direkt zwischen den Knoten um Cluster und der Storage Hardware. Zum Einsatz kommen FC SANs. Kleinere Installationen können auch mit SCSI Storage Enclosures realisiert werden die mehrere Host Adapter erlauben. Für Test und Entwicklung lassen sich auch Firewire Lösungen einsetzen. Ganz aktuell boomt auch der IP basierende Block Zugriff. Mit iSCSI oder diversen Linux Netzwerk Block Devices kann hier eine Gigabit Ethernet eingesetzt werden.
Da der Datenzugriff direkt erfolgt, an einem Server Prozess vorbei sind Cache Konsistenz und das Locking von Datenblöcken wichtige Aufgaben des Cluster Filesystem. Die Leistungsfähigkeit und die Eignung für einen bestimmten Einsatzzweck eines Cluster Filesystems im wesentlichen durch das Meta Data Handling und die Locking Strategie bestimmt. Durchaus üblich ist z.B. dass in einem Cluster ein Node zum zentralen Lock Manager bestimmt wird, was ein Engpass bilden kann wenn viele Dateien benutzt werden, oder die Locks auf Block Ebene sich oft ändern.
Die typische Semantik von lokalen oder Netzwerk Filesystemen lässt sich bei Cluster Filesystemen schwer nachbilden. GFS versucht hier Posix Semantik anzubieten, was den Anwendungen entgegen kommt, die nicht geändert werden müssen. OCFS hat ein einfacheres Ziel: das bereitstellen einer Verzeichnishierarchie auf mehreren Knoten (die Programmdaten und Konfigurationsfiles der Oracle Installation enthält).
Oracle Datenbank benötigt für die Produktivdaten kein Cluster Filesystem. Bei einer parallelen Installation eines DB Servers können sich die einzelnen Instanzen selbst verständigen wer welche Daten cachen oder verändern darf. Durch diese Intelligenz kann Oracle dadurch gehobene Konsistenz und Persistenz Ansprüche erfüllen (ACID Transaktionen).
Dies erklärt auch, warum das OCFS relativ einfach gehalten ist. Die Last auf dem Filesystem für eine Oracle RAC Installation ist gering, ausgefeilte Locking und Caching Strategie sind nicht notwendig. Das GFS ist hier deutlich anspruchsvoller, damit aber auch deutlich komplexer.
Falls jemand von den Lesern praktische Erfahrungen hat mit den einzelnen Filesystemen, bitte mitteilen. Der Review der OCFS Patches auf den Kernel Mailinglisten hat jedenfalls klar gemacht, dass keine allzu aufwändige Entwicklungsarbeit in das Oracle Angebot geflossen ist. Ganz im Gegensatz zum GFS, was ja das Vorzeigeprodukt der aufgekauften Firma Sistina war.
Update: in der Diskussion um die Aufnahme von GFS und OCFS2 in den Linux Kernel hat mich Kurt Hackel von Oracle drauf hingeweisen, dass OCFS und OCFS2 durchaus für Oracle Datenfiles gedacht ist. Durch die bessere POSIX Semantik von OCFS2 lassen sich auch die ORACLE_HOME Programmdateien im OCFS2 speichern, was bei OCFS noch nicht möglich war. OCFS wird von Oracle supported, bei OCFS2 stehen wohl die Zertifizerungen noch aus. Der Vorteil eines Filesystems für Oracle Datenfiles liegt ganz klar in der einfacheren Handhabbarkeit, besonders für die Archive Logs.
Update2: Im aktuellen OTN TechCast "Inside Oracle's Linux Projects" vom 22. September sprechen Wim Coekaerts (Director of Linux Engineering) und Todd Trichler (OTN's Linux evangelist) über OCFS2: dessen Geschichte, kommerzielle Hintergründe und die Aufnahme in den Main Kernel.
Trackbacks
Trackback für spezifische URI dieses Eintrags
Keine Trackbacks
Kommentare
Ansicht der Kommentare:
(Linear | Verschachtelt)
Außerdem besteht ja auch immer die Möglichkeit, die Datenbank direkt die Daten verwalten zu lassen, ohne Interaktion des Betriebssystems.
Was also ist der Vorteil von Clusterfilesystemen in Bezug auf Datenbanken?
Deswegen benutzt Oracle RAC ja das Cluster Filesystem eben genau nicht für die Daten. Es werden nur die Control Files, die Programmdateien und die Parameter Files auf dem Cluster Filesystem verwaltet.
Tablespaces und die Log Segmente liegen auf einem Block Device. Eben weil es hier keinen Vorteil gibt.
Gegenüber dem Netzwerk Filesystem ist dann auch der Datendurchsatz größer, weil die Blockzugriffe über SAN schneller sind als per NFS (zumindest wenn man Glück hat :)
Kandidaten für (gute) Cluster Filesysteme sind eher Web Frontend Server. Hier ist allerdings eine offline Replikation oder ein Cachendes Filesystem wie AFS eine gute Alternative. Von daher bin ich mir nicht so sicher wer von Cluster FS wirklich profitiert.
Layout by Ricky Wilson | Serendipity Template by Carl Galloway | Login
Impressum
Bernd Eckenfels
Mörscher Str. 8
76185 Karlsruhe
bernd-08(a)eckenfels.net
Read More
Suche
Kategorien
Verlinkung
- sprechen[224]
- erwartet[391]
- bewirbt[338]
- hingeweisen[237]
- OCFS2[366]
- OTN[165]
- "Inside Oracle's Linux
Projects"[231] - GFS[496]
- google.com[276]
- www.golem.de[69]
- www.golem.de[35]
- www.google.at[26]
- golem.de[8]
- www.google.de[8]
- www.google.at[4]
- www.google.de[4]
- www.google.lv[3]
- www.google.de[3]
- www.google.de[3]
- www.google.de[3]
- www.google.de[3]
- www.google.ch[3]
- www.google.de[3]
Umfrage
Inhouse Coding?
Archive
Archive
Kommentare
Hans Dampf zu Bewerbung
2008-11-16 11:41
Ich finde es schon sehr anmaßend au
f derartige Anschreiben "negativ" z
u reagieren (und diese zu verspotte
n). Ansch [...]
2008-11-16 11:41
Bernd Eckenfels zu Bewerbung
2008-11-12 20:58
ROTFL - ja auf die Idee diese Blind
bewertungen abzusagen bin ich noch
garnicht gekommen .) Ist das jetzt
unhöflich [...]
2008-11-12 20:58
Dana Stoll zu Bewerbung
2008-11-12 13:39
Anbei ein Antwortschreiben, ebenfal
ls um einige Gedanken ergänzt.
S
ehr geehrter Herr Bewerber,
viel
en Dank f [...]
2008-11-12 13:39
Balu zu Gmail Features
2008-11-11 09:33
Schade, ich mag das Interface von G
Mail, aber ich brauche diese Filter
, um Catchall-Konten zu sortieren..
.
Ich [...]
2008-11-11 09:33
Bernd Eckenfels zu Gmail Features
2008-11-11 02:37
Ich glaube nen, nur From/To/Subject
, body und hasAttachment.
2008-11-11 02:37
Balu zu Gmail Features
2008-11-11 01:12
Kann man inzwischen nach beliebigen
Header-Feldern filtern?
Also z.
B. nach X-Original-To: oder sowas?
2008-11-11 01:12
TK zu Gmail Features
2008-11-09 18:34
LoL hätte nicht gedacht das die den
schwachsinn wirklich einführen. Au
ßerdem könnte ein Betrunkener das F
eature au [...]
2008-11-09 18:34
Bernd Eckenfels zu Gmail Features
2008-11-07 03:00
Ja ich benutz das eigentlich nur in
Englisch. Die Features waren mir n
ur bisher nicht aufgefallen .)
2008-11-07 03:00
Rico zu Gmail Features
2008-11-05 16:58
Tip: GMail auf Englisch umstellen,
dann hast du die neuen Features sch
on Monate vorher.
2008-11-05 16:58
Hardware-Blogger zu Firmenstrukturen
2008-11-03 21:44
Sehr lustig das Bild aber leider wi
rklichkeit in vielen Unternehmen...
2008-11-03 21:44
Blog abonnieren
Blogsphere
Letzten Monat...
Fr, 17.10.2008Java 6u10 ist da (und 6u7 für Itanium)
Fr, 17.10.2008Java 6u10 ist da (und 6u7 für Itanium)
Do, 16.10.2008Gillmor und der Open Source Markt
Mo, 13.10.2008Microsoft Entwicklungen
Mi, 08.10.2008Hyper-V Server
Fr, 17.10.2008Java 6u10 ist da (und 6u7 für Itanium)
Do, 16.10.2008Gillmor und der Open Source Markt
Mo, 13.10.2008Microsoft Entwicklungen
Mi, 08.10.2008Hyper-V Server
Top Referers
www.google.de (24)
search.live.com (4)
bernd.eckenfels.net (2)
ralfeisend.blog.de (2)
www.google.ch (2)
blog.micha.de (1)
de.ask.com (1)
www.google.at (1)
search.live.com (4)
bernd.eckenfels.net (2)
ralfeisend.blog.de (2)
www.google.ch (2)
blog.micha.de (1)
de.ask.com (1)
www.google.at (1)
