Servery HPE pro vývoj jazykových technologií

30. 9. 2022

Česká republika je s ohledem na počet a kvalitu výzkumných center a výzkumných infastruktur na čelních pozicích v Evropské unii. Jedním z takových center je i LINDAT/CLARIAH-CZ neboli digitální výzkumná infrastruktura pro jazykové technologie, umění a humanitní vědy.

Co je LINDAT/CLARIAH-CZ ?

LINDAT/CLARIAH-CZ je české centrum zaměřené na data, které poskytuje certifikované uložiště a služby počítačového zpracování jazyka. Je jedinečnou velkou výzkumnou infrastrukturou, která se zabývá zejména jazykovými, ale i dalšími digitálními zdroji a nástroji pro jejich zpracování.

LINDAT/CLARIAH-CZ nabízí také know-how, softwarové nástroje pro zpracování jazykových a jiných digitálních zdrojů a vývoj jazykových technologií pro potřeby průmyslu a služeb, včetně využití v nových kulturních a kreativních oborech průmyslu. LINDAT/CLARIAH-CZ se zapojuje do mezinárodní spolupráce mezi obdobnými výzkumnými infrastrukturami i přímo mezi institucemi ve všech humanitních oborech a klade důraz na digitální a interdisciplinární metody zpracování, včetně moderních metod strojového učení a umělé inteligence.

Projekt řídí tým prof. RNDr. Jana Hajiče, Dr., Univerzita Karlova, Matematicko-fyzikální fakulta, Ústav formální a aplikované lingvistiky.

Spolupráce s M Computers

Univerzita Karlova požadovala zlepšení IT infrastruktury, která slouží pro vývoj potřebných jazykových technologií. Tyto nové technologie dnes už téměř výhradně používají metody strojového učení a metody umělé inteligence, které jsou ve fázi učení vysoce náročné na výpočetní kapacitu a nelze je provozovat bez specializovaného hardware, tj. bez velkého clusteru s použitím výkonných grafických karet (označovaných „GPU“).

V rámci probíhajícího Operačního programu Věda, Výzkum, Vzdělávání „LINDAT/CLARIAH-CZ – Rozšíření repozitáře, služeb a výpočetního klastru výzkumné infrastruktury vypsala tedy Univerzita Karlova zakázku na dodávku serverů pro posílení aplikačního cloudu pro provoz služeb, poskytovaných v režimu vysoké dostupnosti a navýšení kapacity rychlého datového úložiště Lustre. Součástí zakázky byla i dodávka několika výkonných notebooků pro vývoj aplikací. Vítězem zakázky se stala společnost M Computers, která splnila všechny podmínky soutěže a nabídla řešení postavené na serverech společnosti Hewlett Packard Enterprise (HPE).

HPE Apollo 6500 Gen10 Plus System

Technické řešení projektu firma M Computers postavila na serverech HPE ProLiant a systémech HPE Apollo využívajících procesory AMD. Portfolio značky HPE v této oblasti tvoří základ pro výpočetní platformy, které poskytují bezkonkurenční výkon, zabezpečení, automatizaci a možnosti vzdálené správy. Zároveň podporuje širokou škálu kritických úloh nezbytných pro digitální transformaci.

Optimalizované řešení na míru

Řešení se skládalo z dodávky několika různých serverů HPE ProLiant a systémů HPE Apollo využívajících procesory AMD.

Servery HPE ProLiant jsou jádrem systémů automatizujících správu prostředí a optimalizujících výkon podle konkrétního typu zatížení či úlohy s cílem dosažení výsledků v kratším čase. Rodina serverů ProLiant nabízí všestrannost a široký rozsah funkcí, díky kterým je vhodná pro jakékoli řešení – od 5G, edge a umělé inteligence až po hyperkonvergovanou infrastrukturu, kontejnerizaci a různé architektury CPU a GPU.

Systémy HPE Apollo jsou speciálně navržené, aby podporovali náročné výpočetní operace v oblasti HPC (např. modelování nebo simulace). Tím pomáhají firmám zrychlit vývoj zejména díky zpracování velkých objemů dat a pomocí digitálních modelů simulujících reálný svět. Systémy jsou rovněž přizpůsobeny pro umělou inteligenci tak, aby se optimalizovala schopnost systému se učit a poskytovat co nejkvalitnější výstupy.

Servery pro zpracování neuronových sítí
2 x server HPE ProLiant XL675d/Apollo 6500
každý z nich osazen AMD CPU (celkem 32 jader) a každý z nich osazen 8 grafickými kartami vzájemně propojenými NVidia A100, 40GB ve verzi SXM4
dohromady 110 592 CUDA jader
dohromady 640 GB GPU paměti
Celkový výkon FP16 – 624 TFlops

Data sheet HPE ProLiant XL675d

HPE ProLiant XL675d Gen10 Plus

HPE ProLiant DL385 Gen10 Plus server

Hybridní server CPU-GPU
10x HPE ProLiant DL385 Gen10+
osazen AMD CPU (Celkem 32 jader) a každý server je navíc osazen 3x grafickým akcelerátorem NVidia A40, 48GB
celkem 322 560 CUDA jader
celkem 1 440 GB GPU paměti
Celkový výkon FP16 – 2 244 TFlops

Quick Specs HPE ProLiant DL385

CPU server s vysokou hustotou: 2x 4-node
2x Server HPE Apollo n2600 Gen10+ / XL225n Gen10+ s vysokou hustotou
celkem 8-node (každý NODe osazen 32 výpočetními jádry)
256 GB RAM

Data sheet HPE Apollo n2600

Data sheet HPE ProLiant XL225n

1x MDS server pro LustreFS
HPE ProLiant DL325 Gen10+ v2
16 výpočetních jader
128GB RAM

4x OSS server pro LustreFS
HPE ProLiant DL325 Gen10+ v2
16 výpočetních jader
128GB RAM, 30,72TB NVMe SSD kapacity

Quick specs HPE ProLiant DL325

HPE ProLiant XL225n Gen10 Plus

Společnost HPE díky použití procesorů AMD Epyc pro řešení na serverech HPE ProLiant a systémech HPE Apollo překonala přes 40 světových výkonových rekordů. Podívejte se na video a zjistěte více.

1 2

Instalace a uvedení do provozu

Implementace tohoto projektu byla prováděna na 2 různých lokalitách, což kladlo větší nároky na organizační i logistické plánování. S tím nám významně pomohla společnost DNS a.s., distributor Hewlett-Packard Enterprise pro český trh.

Realizaci montáže prováděli 4 specialisté z řad M Computers rozděleni na dvě samostatné skupiny.

Výzvou byla integrace našeho řešení do různých racků v rámci datových sálů Univerzity Karlovy s ohledem na požadované nároky na napájení a chlazení jednotlivých serverů. Díky zkušenostem z různých typů projektů proběhlo vše hladce a po ověření funkčnosti všech komponent byl projekt úspěšně předán zákazníkovi k nasazení do provozu.

Kontaktujte nás

Zaujalo vás naše řešení? Chcete zjistit, jaké řešení by bylo vhodné pro Vaší firmu? Pojďme se na to společně podívat: Domluvme si nezávaznou konzultaci a bezplatnou analýzu vaší infrastruktury. Pomůžeme vám využít potenciál vašeho IT naplno!

Lukáš Vach

M: 731 678 146
lukas.vach@mcomputers.cz

Servery HPE pro vývoj jazykových technologií

Česká republika je s ohledem na počet a kvalitu výzkumných center a výzkumných infastruktur na čelních pozicích v Evropské unii. Jedním z takových center je i LINDAT/CLARIAH-CZ neboli digitální výzkumná infrastruktura pro jazykové technologie, umění a humanitní vědy.

Co je LINDAT/CLARIAH-CZ ?

Spolupráce s M Computers

Optimalizované řešení na míru

Data sheet HPE ProLiant XL675d

Quick Specs HPE ProLiant DL385

Data sheet HPE Apollo n2600

Data sheet HPE ProLiant XL225n

Quick specs HPE ProLiant DL325

Společnost HPE díky použití procesorů AMD Epyc pro řešení na serverech HPE ProLiant a systémech HPE Apollo překonala přes 40 světových výkonových rekordů. Podívejte se na video a zjistěte více.

Instalace a uvedení do provozu

Kontaktujte nás

Lukáš Vach

Reference

Servery s AMD EPYC™ pro výzkum dynamiky mozku

Pomáháme zrychlit geolokační projekty

Spolupráce s Photon Energy Group – video

Testování automobilů budoucnosti s Lenovo ThinkStation PX

Masarykova univerzita provozuje nejpokročilejší systém pro výpočty AI

Výpočetní HD cluster pro MetaCentrum

Cluster pro kosmologická data

Experimentální HPC systémy na IT4Innovations