EDV-Design realisiert HPC Cluster Erweiterung an der Uni Innsbruck als Turnkey-Lösung mit Lenovo, IBM und Mellanox
Kunde
Die Leopold-Franzens-Universität Innsbruck ist mit ca. 28.000 Studierenden und über 4.800 Mitarbeiterlnnen (inkl. Lehrbetrieb) die größte Universität Westösterreichs. Mit ihrem breiten Forschungsspektrum an 16 Fakultäten und 80 Instituten ist sie ein maßgeblicher österreichischer Wissenspool.
Das Projekt
Die LEO-Rechner-Familie an der Universität Innsbruck schafft, nunmehr mit LEO4, eine wichtige Basis für den Aufbau von Kompetenzen im Bereich Hochleistungsrechnen. „Nur wer seine Fragestellungen auf diesem lokalen Rechner richtig aufsetzen kann, erhält auch die Chance auf den großen nationalen und europäi-schen Supercomputern rechnen zu können“, so Rektor Tilmann Märk.
Konkret geht es um die Teilnahme Österreichs am internationalen Projekt PRACE (Partnerhip for Advanced Computing in Europe), mit dem Wissenschaftler Zugang zu Hochleistungsrechnern in ganz Europa erhalten. Hinzu kommt das gemeinsame Ziel der EU und der beteiligten Mitgliedsstaaten, im Rahmen von EURO-HPC noch potentere Hochleistungscomputer (Exascale) zu errichten, um im wissenschaftlichen Wettbewerb mit den USA und Asien bestehen zu können.
Die Arbeit des Forschungsschwerpunktes Scientific Computing integriert alle Forschungsaktivitäten der Universität Innsbruck in den Bereichen Informationstechnologie und computerunterstütz-ter Forschung. „Die interdisziplinäre Zusammenarbeit von Wissen-schaftlern und wissenschaftlichem Nachwuchs ist eine der we-sentlichen Stärken des Forschungsschwerpunktes Scientific Computing. Von dem Ausbau der Infrastruktur profitieren über 40 Arbeitsgruppen unserer Universität“, betont Alexander Ostermann.
Zum Einsatz kommt das neue System bei der Simulation und Optimierung komplexer Prozesse sowie der Analyse und Präsentation von Big Data, um immer komplexer werdende rechen- und datenintensive Probleme in den verschiedensten Bereichen wie den Naturwissenschaften, Technischen Wissenschaften und Life-Sciences lösen zu können.
Die technische Umsetzung
Das System besteht aus 48 Knoten mit je 28 Intel Xeon 2,6 GHz Cores. Bis auf vier Knoten (512 GB) sind alle Knoten mit 64 Gigabyte RAM ausge-stattet, was ca. 4,9 Terabyte RAM ent-spricht. Das System verfügt über eine leistungsstarke Infiniband-Verbindung (Highspeed Interconnect auf Basis EDR-Infiniband) mit niedriger Latenzzeit für die MPI-Kommunikation zwischen Knoten und Spectrum Scale-Dateisystemverkehr.
Beim Storage haben wir wieder auf Spectrum Scale gesetzt und ein System gebaut, das eine extrem hohe IOPS-Leistung hat (über 400.000 pro Sek.) und auch eine entsprechende Durch-satzrate liefert. Realisiert wurde dies mittels IBM FlashSystem mit ca. 16 TB netto und zwei V5030 Disc Storage Subsystemen, die zusammen auf ca. 130 TB Kapazität kommen. Der Cluster wurde 2019 um einen GPU-Node mit 4 x NVIDIA Volta GV100/ 32 GB mit NVLink erweitert. Double Precision: 4 x 7,8 Teraflops = 31,2 Tera-flops bzw. 500 Teraflops Deep Learn-ing Rechenleistung.
Der Cluster liefert 52 Teraflops CPU- und 31,2 Teraflops GPU-Rechenleistung. Somit hat LEO 4 eine Gesamtrechenleistung von 83,2 Teraflops und ist dadurch der stärkste Tier-2 HPC Uni-Cluster Österreichs.