Zasoby sprzętowe
Obecnie udostępniamy naszym użytkownikom 31640 rdzeni obliczeniowych, 183,50 TB pamięci RAM i ponad 18 PB przestrzeni dyskowej. Teoretyczna wydajność tej konfiguracji to 1053 TFLOPS.
- 25 serwerów typu blade (produkcji HP), każdy wyposażony w:
- 64 rdzenie obliczeniowe (4 procesory AMD Opteron 6276);
- 256 GB pamięci RAM (DDR3);
- Dwa lokalne dyski twarde 900 GB SAS;
- 4 porty 10-Gigabit Ethernet;
- 2 porty InfiniBand QDR (40 Gbit/s per port).
- Wydajność teoretyczna pojedynczego węzła: 588.8 GFLOPS.
- 324 serwerów typu blade (produkcji SuperMicro), każdy wyposażony w:
- 40 rdzeni obliczeniowych (2 procesory Intel Xeon E5-2680 v2);
- 128 GB pamięci RAM (DDR3);
- Lokalny dysk twardy Intel SSD 400 GB SATA;
- Port 10-Gigabit Ethernet;
- Port InfiniBand QDR (40 Gbit/s).
- Wydajność teoretyczna pojedynczego węzła: 448 GFLOPS.
- 144 serwery typu blade (produkcji Bull), każdy wyposażony w:
- 40 rdzeni obliczeniowych (2 procesory Intel Xeon E5-2680 v2);
- 128 GB pamięci RAM (DDR3);
- Lokalny dysk twardy SSD 400 GB Micron P400m-MTFDDAK400MAN;
- Port 1-Gigabit Ethernet;
- Port InfiniBand 56 Gbit/s (w ramach infiniBandu działa most InfiniBand do Ethernet 40 Gbit).
- Wydajność teoretyczna pojedynczego węzła: 448 GFLOPS.
- Macierz dyskowa (produkcji HP):
- Macierz dyskowa wyposażona w 140 dysków 2TB SAS pracująca jako wysokowydajny rozproszony system plików Lustre;
- W skład systemu Lustre wchodzi serwer MDS (Metadata Server) wraz z sześcioma serwerami danych OSS (Object Storage Server);
- Dyski SAS sprzętowo skonfigurowane do pracy w grupach RAID-60 z systemem plików ZFS przydzielone są do pojedynczego MDT (Metadata Target) współpracującego z serwerem MDS oraz 11 OST (Object Storage Target) współpracujących z serwerami OSS;
- Komunikacja pomiędzy poszczególnymi serwerami systemu oraz klientami jest prowadzona za pośrednictwem sieci InfiniBand;
- Całkowita pojemność dostępna dla użytkowników: 170 TB;
- Wydajność odczytu/zapisu w systemie sięga 2 GB/s.
- Macierz dyskowa (produkcji NetApp):
- 2 agregaty dyskowe zawierające łącznie 328 dysków 3 TB SAS;
- 2 serwery dyskowe (model FAS6280) pracujące w trybie HA (High Availability), każdy wyposażony w 96 GB pamięci podręcznej RAM, 512GB pamięci podręcznej Flash Cache oraz 4 interfejsy Ethernet (10-Gigabit per port);
- System plików: NFS w wersji 4.1 z rozszerzeniem pNFS;
- Całkowita pojemność dostępna dla użytkowników: 670 TB;
- Wydajność na poziomie: 3 GB/s odczyt oraz 1.5 GB/s zapis.
- Macierz dyskowa (produkcji EMC):
- 20 węzłów HD400 zawierających łącznie 1180 dysków 6 TB SAS;
- System plików: NFS w wersji 4;
- Całkowita pojemność dostępna dla użytkowników: 5,6 PB;
- Wydajność na poziomie: 20 GB/s.
Równocześnie na potrzeby eksperymentów prowadzonych w Europejskim Ośrodku Badań Jądrowych CERN udostępniamy 4320 rdzeni obliczeniowych, 14 TB pamięci RAM oraz ponad 810 TB przestrzeni dyskowej.
- 108 serwerów typu blade (produkcji SuperMicro), każdy wyposażony w:
- 40 rdzeni obliczeniowych (2 procesory Intel Xeon E5-2680 v2);
- 128 GB pamięci RAM (DDR3);
- Lokalny dysk twardy Intel SSD 400 GB SATA;
- Port 10-Gigabit Ethernet;
- Port InfiniBand QDR (40 Gbit/s).
- Wydajność teoretyczna pojedynczego węzła: 448 GFLOPS.
- Macierze dyskowe (produkcji NetApp):
- 7 agregatów dyskowych zawierające łącznie 686 dysków po 3/4 TB SAS;
- 4 serwery dyskowe (model FAS6280, FAS6290) pracujące w trybie HA (High Availability), każdy wyposażony w 96 GB pamięci podręcznej RAM, 512GB pamięci podręcznej Flash Cache oraz 4 interfejsy Ethernet (10-Gigabit per port);
- System plików: NFS w wersji 4.1 z rozszerzeniem pNFS;
- Całkowita pojemność dostępna dla użytkowników: 1,7 PB;
- Wydajność na poziomie: 6 GB/s odczyt oraz 3 GB/s zapis.
Wszystkim korzystającym z naszych zasobów zapewniamy szybki i redundantny dostęp do Internetu. Połączenie z siecią zewnętrzną realizowane jest obecnie przez dwa niezależne łącza o przepływnościach 10 Gigabajtów na sekundę.
Udostępniane zasoby mocy obliczeniowej są systematycznie powiększane w miarę rozbudowywania klastra o nowe partie sprzętu. Równomierne rozłożenie kolejnych zakupów umożliwi nie tylko optymalne wykorzystanie środków finansowych w stosunku do potrzeb użytkowników, ale także zapewni możliwość regularnego rozbudowywania infrastruktury o najnowocześniejsze dostępne w danym momencie na rynku rozwiązania.
Powstały w ramach projektu klaster komputerowy jest jedną z największych tego typu instalacji w Polsce oraz jednym z najwydajniejszych superkomputerów dedykowanych branży energetyki jądrowej na świecie.
