Experimentální HPC systémy na IT4Innovations

Experimentální HPC a AI systémy na IT4Innovations

10.11.2022

IT4Innovations provozuje vedle svých velkých superpočítačů (seznam) také menší komplementární systémy. Tyto systémy představují nastupující, netradiční nebo úzce specializované hardwarové architektury, které se v běžných superpočítačových datových centrech nevyskytují. V posledních říjnových dnech byl uvedeny do provozu Komplementární systémy I.

Compute partition 1 – Arm A64FX procesory

Výpočetní uzly první části Komplementárních systémů I. jsou postaveny na Arm A64FX procesorech s integrovanou rychlou HBM2 pamětí. Jedná se v podstatě o fragment v posledních letech nejvýkonnějšího superpočítače na světě Fukagu v japonském RIKEN Center of Computational Science (aktuálně je tento superpočítač druhý nejvýkonnější). Konfigurace se skládá z osmi výpočetních uzlů systému HPE Apollo 80, které jsou navzájem propojené 100Gb/s Infiniband sítí. Konfigurace výpočetního uzlu:

1× Arm A64FX, 48 jader, 2 GHz, 32GB HBM2 paměti
400 GB SSD
HDR Infiniband 100 Gb/s

V komplementárních systémech jsou nasazené i nové programové modely, knihovny a nástroje pro vývoj aplikací, které dokáží z hardwaru získat maximální výkon. Komplementární systémy tak poskytnou vědeckým týmům možnost vyzkoušet a porovnat experimentální architektury s tradičními (x86 + Nvidia GP GPU) a příležitost optimalizovat a urychlit výpočty v nových oblastech výzkumu. Projekt Komplementrátní systémy I., který byl v říjnu uvedený do provozu, se skládá z několika částí. Jsou postaveny na serverech společnosti Hewlett Packard Enterprise a dodala a implementovala je brněnská společnost M Computers.

Komplementární systémy na IT4I

Informace o projektech komplementárních systémů na IT4Innovations.

Více informací

Compute partition 2 – Intel procesory, Intel PMEM, Intel FPGA (Altera)

Výpočetní uzly této části Komplementárních systémů jsou postaveny na technologiích Intel. Servery jsou osazeny procesory Intel Xeon třetí generace, persistentními (non-volatilními) Intel Optane pamětmi o celkové kapacitě 2TB a 8TB na server a FPGA kartami Intel Stratix 10 MX2100. Tuto část tvoří dva uzly HPE ProLiant DL380 Gen 10 Plus v konfiguraci:

2× Intel Xeon Gold 6338, 32 jader, 2 GHz
256 GB RAM
8 TB a 2 TB Intel Optane Persistent Memory (NVDIMM)
2 TB NVMe SSD
2× FPGA Bittware 520N-MX (Intel Stratix 10)
HDR Infiniband 100 Gb/s

Compute partition 3 – AMD procesory, AMD akcelerátory, AMD FPGA (Xilinx)

Třetí část Komplementárních systémů je postava na technologiích AMD. Servery jsou osazeny procesory AMD EPYC třetí generace, čtyřmi GP GPU kartami AMD Instinct MI100, které jsou navzájem propojené rychlou sběrnicí (AMD Infinity Fabric) a dále dvěma, výkonem odlišnými, FPGA kartami Xilinx Alveo. Xilinx je jedna z nejnovějších velkých akvizic společnosti AMD. Tuto část tvoří dva uzly HPE Apollo 6500 Gen 10+ v konfiguraci:

2× AMD EPYC 7513, 32 jader, 2,6 GHz
256 GB RAM
2 TB NVMe SSD
4× AMD Instinct MI100 (AMD Infinity Fabric Link)
FPGA Xilinx Alveo U250
FPGA Xilinx Alveo U280
HDR Infiniband 100 Gb/s

Softwarové vybavení

Významnou součástí Komplementárních systémů I. je software, který v sobě zahrnuje prostředí, kompilátory, numerické knihovny nebo nástroje pro vývoj a ladění algoritmů.

HPE Cray Programming Environment

HPE Cray Programming Environment je komplexní nástroj pro vývoj HPC aplikací v heterogenním prostředí. Podporuje tak všechny architektury Komplementárních systémů. Obsahuje optimalizované knihovny, podporu nejpoužívanějších programovacích jazyků, nebo několik nástrojů pro analýzu, ladění a optimalizaci paralelních algoritmů. Součástí dodávky je podpora HPE pro nástoje obsažené v Cray PE balíku.

Intel oneAPI

OneAPI jen nástroj společnosti Intel pro vývoj aplikací nasazených na heterogenních platformách – např. CPU, GP GPU, FPGA a dalších. V Komplementárních systémech se plánuje využít především pro FPGA karty.

AMD ROCm

ROCm je softwarový balík společnosti AMD, který obsahuje programovací modely, vývojové nástroje, knihovny, nebo integrační nástroje pro nejpoužívanější AI frameworky, které pracují nad AMD GP GPU akcelerátory.

Testování

Pokud máte zájem o bližší informace ohledně HPE Superdome systémů nebo se chcete domluvit na jeho testování, kontaktujte nás prosím přes tento formulář.