Klastr Goliáš

Výpočetní středisko FZÚ zabezpečuje provoz několika počítačových klastrů a diskových serverů, zapojených do národních i mezinárodních gridových projektů.

Největší klastr Goliáš poskytoval na začátku roku 2021 přibližně 10000 logických (5000 reálných) výpočetních jader. Klastr se průběžně rozšiřuje o nové servery, proto zahrnuje různě staré verze CPU od Intel a AMD. Spolu s diskovými servery o celkové kapacitě přes 5 PB (leden 2021) je zapojen do mezinárodního gridu EGI, projektu WLCG (distribuované zpracování dat pro experimenty na LHC urychlovači) i OpenScience gridu (převážně pro projekty v USA). Díky spolupráci s národní e-Infrastrukturou eINFRA má výborné externí připojení (100 Gbps do privátní sítě pro LHC a 40 Gbps do internetu).

Všechny servery spravujeme pomocí Puppet, změny uchováváme v Git. Rozsáhlé lokální monitorování obstarává Nagios a Prometheus, jeho vizualizaci munin a Grafana. Distribuci úloh na servery zajišťuje dávkový systém HTCondor. Statistiky využití se publikují na portálu EGI. Kapacita pro výpočty je rozšířena fungujícím přeposíláním vybraných úloh do národního superpočítačového střediska IT4I, zálohy a rozšíření úložných prostor provádíme na zdrojích CESNET.

Klastr Goliáš

Subklastr Minis

12 serverů ASUS RS500A o velikosti 1U. Každý server je osazen jedním 16ti jádrovým procesorem typu AMD Epyc 7351P, 2.4GHz, 32 GB RAM DDR4 a 480 GB SSD Kingston DC500M. Naměřený příkon jednoho serveru je 200 W. V provozu od konce prosince 2020.

Subklastr Lilium

47 serverů Supermicro 6017R-NTF o velikosti 1U. Každý server je osazen dvěma 8mi jádrovými procesory typu Intel Xeon E5-2650 v2, 2.6GHz, 96 GB RAM DDR3 a dvěma 500 GB disky. Výkon 308 HS06 na jeden server. Naměřený příkon jednoho serveru při maximální zátěži je 288 W. V provozu od konce prosince 2020.

Celkový výkon subklastru: 14182 HS06 (1472 jader se zapnutým HT).

Subklastr Mahagon

6 HPE Apollo 35 Serverů o velikosti 2U, v každém 4 servery; celkem 24 výpočetních uzlů. Každý uzel je osazen dvěma 16-jádrovými procesory typu AMD EPYC 7301, 2.2GHz, 128 GB RAM DDR4 a 1.92 TB SSD Intel S4510. Výkon 736 HS06 na jeden server, zapnutý HT. Naměřený příkon celého subklastru při maximální zátěži je 8,7 kW. V provozu od května 2019.

Celkový výkon subklastru: 17680 HS06 (1536 jader se zapnutým HT).

Subklastr Mikan

51 serverů Huawei RH1288 V3. Každý server je osazen dvěma 12-jádrovými procesory typu Intel Xeon E5-2650 v4, 2.2GHz, 128 GB RAM DDR4 a dvěma 600 GB SAS disky. Výkon 511 HS06 na jeden server, zapnutý HT. Naměřený příkon jednoho serveru 342 W při maximální zátěži, celého subklastru 17,5 kW. Subklastr pořízen z prostředků projektů OP VVV: CERNC, AUGER.CZ a Fermilab – CZ. V provozu od listopadu 2017.

Celkový výkon subklastru: 26040 HS06 (2448 jader se zapnutým HT).

Subklastr Magic

9 Intel Twin Serverů o velikosti 2U, v každém 4 servery typu Intel Compute Module HNS2600KP; celkem 36 výpočetních uzlů. Každý uzel je osazen dvěma 10-jádrovými procesory typu Intel Xeon E5-2630 v4, 2.2GHz, 128 GB RAM DDR4 a dvěma 600 GB SAS disky. Výkon 417 HS06 na jeden server, zapnutý HT. Naměřený příkon celého subklastru při maximální zátěži je 10,4 kW. V provozu od dubna 2017.

Celkový výkon subklastru: 15001 HS06 (1440 jader se zapnutým HT).

Subklastr Aplex

32 serverů ASUS s poloviční hloubkou, umístění do skříně iDataPlex, nahradily část vyřazených strojů iberis z roku 2008. 30 serverů v konfiguraci: 2x Intel Xeon Xeon E5-2630-v3 (Haswell) 2.4 GHz 8c, 64 GB RAM DDR4, 2x SATA HDD 500 GB, výkon 338 HS06 na server. 2 servery jsou osazeny procesory Xeon E5-2695-v3 se 14 jádry každý, 2.3 GHz, 128 GB RAM DDR4, disky shodné, výkon 595 HS06 na server. Naměřený elektrický příkon jednoho serveru 220 W při maximální zátěži, celého subklastru 7 kW. V provozu od prosince 2014.

Celkový výkon subklastru: 11360 HS06 (1072 jader se zapnutým HT).

Subklastr Malva

12 twin serverů (v 6 šasi o velikosti 1U každé) Supermicro s procesory Intel Xeon E5-2650 v2 95W 2.6GHz. Každý server je osazen 2 CPU, 64 GB RAM a 2 SATA disky (500 GB, 10k rpm). Výkon 352 HS06 na server. Zpracovává až 384 úloh najednou (zapnutý HT). Spotřeba jednoho serveru při plném zatížení je 350 W. V plném provozu od prosince 2013.

Celkový výkon subklastru: 4224 HS06 (384 jader se zapnutým HT).

Subklastr Ib

Dodávka na doplnění volných pozic v iDataPlex, v provozu od ledna 2011). 26 serverů dx360 M3, každý se 2 CPU Intel Xeon X5650 (6 jader na procesor), 48 GB RAM, 2xHDD SAS 300 GB. Zapnutý HyperThreading. Spotřeba při plném zatížení 284 W, výkon 204 HS06 na server.

Celkový výkon subklastru: 5304 HS06 (312 fyzických jader, 624 jader se zapnutým HT).

Subklastr Ibis

Druhý systém iDataPlex, dodaný o rok později (v provozu od ledna 2010). Obsahuje 65 serverů dx360 M2, každý se 2 CPU Intel Xeon E5520 (4 jádra na procesor), 32 GB RAM, 1xHDD SAS 450 GB. Zapnutý HyperThreading. Spotřeba při plném zatížení 256 W, výkon 118 HS06 na server.

Celkový výkon subklastru: 7670 HS06 (520 fyzických jader, 1040 jader se zapnutým HT).