Hochperformante Storage-Infrastruktur für HPC-Cluster

Wenn der Cluster immer schneller rechnet, soll die Storage-Infrastruktur nicht zum Bremsklotz werden. Parallele Dateisysteme sind das Mittel der Wahl, um den rasant steigenden Speicherbedarf in HPC-Umgebungen in den Griff zu bekommen. Sie ermöglichen es, Storage-Inseln zu konsolidieren und zu zentralisieren. Das macht aufwändige Kopiervorgänge überflüssig und beschleunigt so die typischen Workflows des HPC. Wir helfen Ihnen dabei, das passende Storage-Konzept für Ihre Anforderungen zu finden und Ihren Speicher mit hoher Performance an Ihre HPC-Umgebung anzubinden.

Was wir für Sie tun können

• Consulting: Analyse der Umgebung, Identifikation von Storage-Engpässen, Vorschläge zur Optimierung der
  Storage-Lösung, Entwicklung von Lösungskonzepten
• Lösungsplanung: Auswahl der Hardware, Aufbau des Storage-Netzwerks, Anbindung der Clients
• Lösungsumsetzung: Installation und Konfiguration der
  Storage-Lösung, Anbindung der Clients
• Workflow-Optimierung: Datenmigration, Backup-Konzept
• Betriebsunterstützung

Eingesetzte Technologien

• Dateisysteme: Lustre, GPFS, FhGFS
• Appliances: HP X9000 (IBRIX), IBM SONAS, EMC Isilon, Panasas

Wichtige Eigenschaften der Lösungen von s+c

• hohe Storage-Performance
• freie Datenorganisation in einheitlichem Namensraum
• Zentralisierung der Storage-Infrastruktur
• Beseitigung unnötiger Kopiervorgänge
• konsistente Datenhaltung
• Skalierbarkeit der Lösung (Anzahl der Clients, Dateisystemgröße, Performance)
• fehlertolerante Konzeption
• Integration mit HSM- und Archiv-Systemen
• konsistenter Zugriff von Windows- und Unix/Linux-Clients
• Kompatibilität mit unterschiedlichen Interconnects
• schnelles Backup und Restore

Unsere Kompetenzen

• HPC-Umgebungen: Konzeption und Betrieb
• Verteilte Systeme: Funktionsweise und Anforderungen
• Applikationen: Workflow und I/O-Pattern
• Storage-Konzepte: Backup und Replikation
• Netzwerktechnik: 10G Ethernet, InfiniBand und FibreChannel
• Überblick über gesamten I/O-Pfad

Ihr Nutzen mit einer Lösung von s+c

• Schneller Datendurchsatz
• Storage-Konsolidierung
• Workflow-Optimierung
• Mitwachsende Lösung
• Maßgeschneidert für Ihre Anforderungen

Projektbeispiele

Lustre in der Aerodynamik-Berechnung

Für CFD-Berechnungen bei einem Automobilhersteller haben wir zahlreiche konventionelle Linux-Fileserver abgelöst durch einen zentralen Storage-Cluster auf Basis des Dateisystems Lustre. HPC-Jobs benötigen seither keine lokalen Datenkopien mehr. Allein das Wegfallen der Kopieraktionen hat die Gesamtlaufzeit der Jobs erheblich verringert.

GPFS in der thermischen Absicherung

Bei einem Automobilhersteller haben wir ein Konzept zur Konsolidierung von Projektdaten auf ein zentrales, geclustertes Speichersystem erstellt. Mehrere HPC-Cluster greifen darauf hochperformant über das parallele Dateisystem GPFS zu, während Linux-Workstations und Windows-PCs die Standardprotokolle NFS und CIFS nutzen.