Steinbuch Centre for Computing (SCC)

Storage für das Wissenschaftliche Rechnen

Das SCC betreibt Speichersysteme für unterschiedlichste Einsatzzwecke:

Speichersysteme an den Clustern
Direkt an den Clustern sind sogenannte parallele Dateisysteme angebunden. Diese zeichnen sich durch eine sehr hohe Durchsatzleistung und eine sehr gute Skalierbarkeit aus. Seit Anfang des Jahres 2005 wird an den Clustern Lustre als Datensystem eingesetzt. Die Lustre-Installation wird derzeit von den Forschungshochleistungsrechnern ForHLR I und ForHLR II sowie den Landesrechnern bwUniCluster genutzt. Derzeit gibt es auf diesen HPC-Systemen ingesamt 10 Lustre-Dateisysteme mit einer Speicherkapazität von 9573 TiB, 61 Servern und 2600 Clients.

Weitere Informationen:

  • User Guides der HPC-Systeme.
  • Folien und Vorräge zu produktiven Lustre-Installationen auf der Softwareproduktseite Lustre.

On-demand File Systeme
Zukünftige Anwendungen werden höhre Anforderungen an das Speichersubsystem der HPC-Systeme stellen. Um diesen Bedarf zu decken, stellt das SCC auf den jetzigen und zukünftigen HPC-Systemen die Funktionalität eines on-demand File System zur Verfügung. Diese Dateisysteme werden dabei exklusiv für einen HPC-Job erstellt und sind nur während der Simulation auf den allokierten Rechenknoten verfügbar. Mehr Informationen dazu enthalten die Projektseiten ADA-FS und die Dokumentationen der HPC-Systeme.

Massenspeicher für wissenschaftliche Daten (LSDF Online Storage)
Der Dienst "LSDF Online Storage" bietet Nutzern des KIT Zugriff auf einen Datenspeicher, der insbesondere für die Speicherung von wissenschaftlichen Messdaten und Simulationsergebnissen datenintensiver Wissenschaftsdisziplinen vorgesehen ist. Der Zugriff wird über Standardprotokolle gewährleistet.
Die Sicherung und der Schutz der Daten erfolgt nach aktuellem Stand der Technik. Der Dienst ist nicht zur Speicherung personenbezogener Daten geeignet.
Mehr Informationen: Massenspeicher für wissenschaftliche Daten (LSDF Online Storage).

Archivspeicher (bwDataArchive)
Der Landesdienst bwDataArchive bietet eine technische Infrastruktur zur langfristigen Archivierung von Forschungsdaten.

bwDataArchive steht insbesondere Mitgliedern von Universitäten und öffentlichen Forschungseinrichtungen aus Baden-Württemberg zur Verfügung. Die Datenarchivierung erfolgt am KIT und umfasst eine verlässliche Speicherung auch großer Datenbestände für einen Zeitraum von zehn Jahren oder darüber hinaus. Der Dienst ermöglicht eine qualifizierte Umsetzung der Empfehlungen der Deutschen Forschungsgemeinschaft (DFG) zur guten wissenschaftlichen Praxis (Empfehlung 7 zur Sicherung und Aufbewahrung von Forschungsdaten).

Online-Speicher zum Teilen von Daten (bwSync&Share)
Der Landesdienst bwSync&Share ist ein Online-Speicherdienst für Beschäftigte und Studierende der Universitäten und Hochschulen in Baden-Württemberg. Dieser wird seit dem 01.01.2014 am KIT betrieben und ermöglicht es den Nutzern, ihre Daten zwischen verschiedenen Computern, mobilen Endgeräten und Benutzern zu synchronisieren bzw. auszutauschen. Zugang zum bwSync&Share-Portal mit bwsyncandshare.kit.edu