Supernova: Różnice pomiędzy wersjami
Przejdź do nawigacji
Przejdź do wyszukiwania
| Linia 8: | Linia 8: | ||
* węzeł dostępowy (nova), | * węzeł dostępowy (nova), | ||
* dwa węzły usługowe (darkmass/SE i dwarf/CE), | * dwa węzły usługowe (darkmass/SE i dwarf/CE), | ||
| − | * | + | * 732 węzły obliczeniowe (wn001 - wn732), |
* sieć obliczeniowa - [[Infiniband]] DDR fat-tree full-cbb, | * sieć obliczeniowa - [[Infiniband]] DDR fat-tree full-cbb, | ||
* sieć zarządzania - gigabit ethernet. | * sieć zarządzania - gigabit ethernet. | ||
Zasoby obliczeniowe klastra: | Zasoby obliczeniowe klastra: | ||
| − | * | + | * 6864 rdzeni obliczeniowych, |
| − | * | + | * >13 TB pamięci operacyjnej (2GB/rdzeń) |
| − | * ~100 TB przestrzeni dyskowej ( | + | * ~100 TB przestrzeni dyskowej (NFS + [[Lustre]]), |
* komunikacja pomiędzy węzłami klastra: przepływność 20Gbps, opóźnienia < 5 us. | * komunikacja pomiędzy węzłami klastra: przepływność 20Gbps, opóźnienia < 5 us. | ||
| Linia 26: | Linia 26: | ||
CPU : <br /> | CPU : <br /> | ||
liczba CPU : <br /> | liczba CPU : <br /> | ||
| − | cache : <br /> | + | cache L2 : <br /> |
pamięć : <br /> | pamięć : <br /> | ||
dysk /home : <br /> | dysk /home : <br /> | ||
dysk /scratch : <br /> | dysk /scratch : <br /> | ||
system operacyjny : <br /> | system operacyjny : <br /> | ||
| + | |||
|style="vertical-align: top;"| | |style="vertical-align: top;"| | ||
'''nova.wcss.wroc.pl''' <br /> | '''nova.wcss.wroc.pl''' <br /> | ||
'''19 TFLOPS''' <br /> | '''19 TFLOPS''' <br /> | ||
'''dostępowy''' <br /> | '''dostępowy''' <br /> | ||
| − | Intel Xeon 3GHz<br /> | + | Intel Xeon 5160 3GHz<br /> |
2x dual-core<br /> | 2x dual-core<br /> | ||
4MB<br /> | 4MB<br /> | ||
16GB<br /> | 16GB<br /> | ||
| − | + | NFS 10TB<br /> | |
-<br /> | -<br /> | ||
ScientificLinux<br /> | ScientificLinux<br /> | ||
| + | |||
| + | |style="vertical-align: top;"| | ||
| + | <br /> | ||
| + | <br /> | ||
| + | '''obliczeniowe generacji I (152)''' <br /> | ||
| + | Intel Xeon X3220 2.4 GHz<br /> | ||
| + | 1 quad-core<br /> | ||
| + | 8MB<br /> | ||
| + | 8GB<br /> | ||
| + | NFS 10TB<br /> | ||
| + | [[Lustre]]<br /> | ||
| + | ScientificLinux<br /> | ||
| + | |||
| + | |style="vertical-align: top;"| | ||
| + | <br /> | ||
| + | <br /> | ||
| + | '''obliczeniowe generacji II (136)''' <br /> | ||
| + | Intel Xeon E5345 2.33 GHz<br /> | ||
| + | 2x quad-core<br /> | ||
| + | 8MB<br /> | ||
| + | 16GB<br /> | ||
| + | NFS 10TB<br /> | ||
| + | [[Lustre]]<br /> | ||
| + | ScientificLinux<br /> | ||
| + | |||
|style="vertical-align: top;"| | |style="vertical-align: top;"| | ||
<br /> | <br /> | ||
<br /> | <br /> | ||
| − | '''obliczeniowe ( | + | '''obliczeniowe generacji III (40)''' <br /> |
| − | Intel Xeon | + | Intel Xeon L5420 2.5 GHz<br /> |
| − | + | 2x quad-core<br /> | |
| − | + | 12MB<br /> | |
| − | + | 16GB<br /> | |
| − | + | NFS 10TB<br /> | |
| − | + | [[Lustre]]<br /> | |
| + | ScientificLinux<br /> | ||
| + | |||
| + | |style="vertical-align: top;"| | ||
| + | <br /> | ||
| + | <br /> | ||
| + | '''obliczeniowe generacji IV(404)''' <br /> | ||
| + | Intel Xeon X5650 2.67 GHz GHz<br /> | ||
| + | 2x six-core<br /> | ||
| + | 12MB<br /> | ||
| + | 24GB<br /> | ||
| + | NFS 10TB<br /> | ||
| + | [[Lustre]]<br /> | ||
ScientificLinux<br /> | ScientificLinux<br /> | ||
| + | |||
|- | |- | ||
|} | |} | ||
Wersja z 12:57, 30 maj 2011
< Podręcznik użytkownika KDM < Maszyny obliczeniowe
| ! | Klaster Nova jest w trakcie rozbudowy, niektóre z poniższych informacji zostaną zaktualizowane po zakończeniu prac. |
| {{{nazwa}}} |
|---|
| [[Plik:|250px|noframe|center]] |
| Kontakt |
| nova @ kdm.wcss.wroc.pl |
Nova - klaster zainstalowany w WCSS, włączony w struktury projektu EGEE i PL-Grid. Architektura wszystkich komputerów to x86_64 (Intel Core micro Architecture, EM64T).
Elementy klastra:
- węzeł dostępowy (nova),
- dwa węzły usługowe (darkmass/SE i dwarf/CE),
- 732 węzły obliczeniowe (wn001 - wn732),
- sieć obliczeniowa - Infiniband DDR fat-tree full-cbb,
- sieć zarządzania - gigabit ethernet.
Zasoby obliczeniowe klastra:
- 6864 rdzeni obliczeniowych,
- >13 TB pamięci operacyjnej (2GB/rdzeń)
- ~100 TB przestrzeni dyskowej (NFS + Lustre),
- komunikacja pomiędzy węzłami klastra: przepływność 20Gbps, opóźnienia < 5 us.
Zestawienie
|
klaster : |
nova.wcss.wroc.pl |
|
|
|
|
Oprogramowanie
- Aplikacje
Abaqus, ACES2, Autodock, CAMFR, CPMD, FDS-SMV ,GAMESS, Gaussian, LAMMPS, Meep, MOLCAS, Molpro, Matlab, NWChem, R, TURBOMOLE aplikacje własne użytkowników.
- Kompilatory
- Biblioteki
- MVAPICH1,
- MVAPICH2,
- MKL (/opt/intel/mkl/WERSJA/lib/em64t/),
- GotoBLAS (/usr/local/lib/),
- ATLAS 3.8.3 (/usr/local/atlas-3.8.3)
- ...
- Narzedzia
- System kolejkowania
RSA key fingerprint
d5:85:f7:5a:92:9b:72:7d:d3:74:67:ab:e4:46:28:e9
Zalecenia
- na dysku /home wprowadzone zostały kwoty dyskowe: limit miękki 20GB, limit twardy 25GB, limit czasowy 7 dni; sprawdzenie stanu:
quota
opis systemu kwot:
man quota
- zainstalowane zostały nowe kompilatory Intela oraz nowa biblioteka MKL; oprogramowanie korzystające ze starych bibliotek może nie uruchamiać się lub pracować nieoptymalnie - wymagana jest rekompilacja;
- oprogramowanie zrównoleglone w standardze MPI musi zostać przekompilowane, aby mogło korzystać z sieci Infiniband; domyślna implementacja MPI to MVAPICH1;
- zadania MPI uruchamiane poprzez sieć Ethernet a nie Infiniband bądą zabijane bez ostrzeżenia - sieć Ethernet jest dedykowana dla NFS;
- zadania MPI należy uruchamiac poprzez narzędzie MPIEXEC a nie mpirun;
- oprogramowanie zrównoleglone w innym standardze niż MPI musi zostać przekonfigurowane - prosimy o kontakt użytkownikow takich aplikacji;
- zalecenia dotyczące współdzielonego dysku scratch - Lustre
Zobacz też
- Jak korzystać z kolejek?
- Maszyny obliczeniowe
- Przekierowanie wyświetlania
- Programy badawcze
- Galeria zdjęć (Nova)
- Galeria zdjęć z uruchomienia
| Maszyny obliczeniowe | Bem ⋅ Klaster kampusowy |
|---|