Liebe HPC-Nutzerinnen und Nutzer,
im Newsletter dieses Monats kündigen wir eine bevorstehende und wichtige Änderung für die Speichersysteme des HPC-Clusters an. Bitte lesen Sie die folgenden Hinweise aufmerksam durch:
- Begrenzung der Datenmenge: Um eine optimale Leistung der zentralen Dateisysteme zu gewährleisten, werden wir eine Begrenzung der Anzahl von Dateien, die jeder Benutzer in seinen Verzeichnissen speichern kann, durchsetzen müssen. Diese Begrenzung betrifft die Verzeichnisse $HOME, $DATA und $OFFSITE, sie ist im HPC-Wiki dokumentiert und wird am 11. Mai aktiviert. Nutzer, die dieses Limit überschreiten, werden vorher in einer separaten E-Mail informiert.
Sobald die Quote für die Anzahl der Dateien aktiv ist, können Benutzer, die zu viele Dateien (mehr als die Hardquota) in einem bestimmten Verzeichnis haben, keine neuen Dateien mehr in diesem Verzeichnis anlegen. Zusätzlich gibt es eine Softquota, die eine 30-tägige Übergangsfrist zum vorübergehenden Speichern zusätzlicher Dateien auslöst (das gleiche Prinzip wie bei den Soft- und Hardquotas für die Dateigröße, die Sie bereits kennen und die natürlich ebenfalls aktiv bleiben).
Wenn Sie Fragen zu dieser Änderung haben oder höhere Quotas beantragen wollen, wenden Sie sich bitte an . - Aktualisierter lastquota-Befehl : Der Befehl lastquota spiegelt nun die bevorstehende Änderung der Quotas wider. Er gibt jetzt für die meisten Verzeichnisse zwei Zeilen aus: eine für die verbrauchte Kapazität und eine für die verbrauchte Anzahl von Dateien. Falls Sie über einem Soft-Limit liegen, wird auch die verbleibende Toleranzzeit angezeigt.
- Reduzieren der Dateisystemauslastung: Wenn Sie die Anzahl und Größe der gespeicherten Dateien reduzieren müssen, sollten Sie das Erstellen komprimierter tar-Dateien in Betracht ziehen. Der Befehl
$ tar cf - projekt_xyz/ | zstd -T0 > projekt_xyz.tar.zst
fasst alle Dateien aus dem Verzeichnis project_xyz/ in einer einzigen Datei project_xyz.tar.zst zusammen, wobei Zstandard zur Komprimierung verwendet wird. Weitere Details dazu finden Sie im HPC-Wiki. - $WORK ist fast voll: Das Dateisystem für $WORK war letzte Woche zu mehr als 90% voll, nur noch etwa 50TB waren frei (jetzt sind wir wieder bei über 100TB). Alle Benutzer werden gebeten, zu prüfen, ob sie Dateien, die nicht aktiv auf dem Cluster benötigt werden, z.B. nach $DATA oder $OFFSITE verschieben können. Eine Anleitung dazu finden Sie im HPC-Wiki.
- Nutzerumfrage: Die BI (in welcher das Wissenschaftliche Rechnen eine Abteilung ist) hat eine Benutzerumfrage gestartet, um unsere Dienste zu evaluieren. Ein PDF davon ist unter https://uol.de/bi/nutzerumfragen zu finden (gehen Sie zum Ende der Seite, um die Version für das Wissenschaftliche Rechnen zu finden). Eine Online-Version ist ebenfalls in Vorbereitung. Ihr Feedback ist sehr willkommen.
- Termine: Bitte beachten Sie die folgenden Termine
- HPC Status Conference (Gauß Alliance): 27. April, 10 - 17:30 Uhr (online, Anmeldung erforderlich)
- Treffen den HPC-Nutzervertretern: 25. Juni, 10 - 12 Uhr (voraussichtlich online)
- Deadline für HLRN-Anträge: 28. April
- Software-Installationen: Die folgenden Module sind jetzt auf hpc-env/8.3 verfügbar:
- SNAP-HMM/20190603-GCC-8.3.0
- BioPerl/1.7.8-GCCcore-8.3.0
- dmipy/1.0.5-foss-2019b-Python-3.7.4
- Nilearn/0.7.1-foss-2019b-Python-3.7.4
- Exonerate/2.4.0-GCC-8.3.0
- RStudio/1.4.1106-foss-2019b-Java-11-R-4.0.2
- exciting/nitrogen-14-intel-2019b-Python-2.7.16
- ... und diverse weitere Module! Werfen Sie also einen Blick auf unsere Software-Seite, falls Sie das eine oder andere (Dependency-)Update benötigen.
Die obige Liste ist möglicherweise nicht vollständig, Sie können immer mit dem Befehl "module spider <softwarename>" nach Software suchen.
Beste Wünsche und happy Computing!
Ihr HPC-Support-Team