Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentesRévision précédenteProchaine révision | Révision précédente | ||
documentation:clusters:hardware [2021/11/17 16:06] – [Clusters de formation et d'expérimentation du CBP] ltaulell | documentation:clusters:hardware [2023/07/21 06:42] (Version actuelle) – [Cluster E5] ltaulell | ||
---|---|---|---|
Ligne 1: | Ligne 1: | ||
- | |||
====== Configuration matérielle des clusters ====== | ====== Configuration matérielle des clusters ====== | ||
Description du matériel disponible dans les différents clusters du PSMN. | Description du matériel disponible dans les différents clusters du PSMN. | ||
- | | + | <WRAP center round important 60%> |
- | * Les serveurs de compilation, | + | |
- | + | **[[http:// | |
- | * Nombre total de coeurs | + | |
+ | See also our [[news:blog|Fil des news]] for up-to-date informations | ||
+ | </ | ||
+ | |||
+ | Tous les clusters utilisent le même OS, Debian 11 ainsi que le gestionnaire de job slurm. | ||
+ | |||
+ | <WRAP center round information 60%> | ||
+ | [[news:stats|Statistiques d' | ||
+ | </ | ||
+ | |||
+ | |||
+ | ====== Cluster Cascade ====== | ||
+ | |||
+ | Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu'un **scratch** commun (**''/ | ||
+ | |||
+ | * **16 416 coeurs | ||
+ | |||
+ | ===== Groupe s92 ===== | ||
+ | |||
+ | 171 noeuds bi-processeurs Intel S9200WK identiques, chaque noeud contenant : | ||
+ | | ||
+ | | ||
+ | * interconnexion Infiniband HDR/EDR (100 Gb/s) | ||
====== Cluster Lake ====== | ====== Cluster Lake ====== | ||
Ligne 14: | Ligne 36: | ||
Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu'un **scratch** commun (**''/ | Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu'un **scratch** commun (**''/ | ||
- | * **13 664 coeurs au total** | + | * **13 472 coeurs au total** |
- | + | ===== Groupe | |
- | + | ||
- | ===== Groupe | + | |
14 noeuds bi-processeurs Dell C6525 identiques, chaque noeud contenant : | 14 noeuds bi-processeurs Dell C6525 identiques, chaque noeud contenant : | ||
- | * 2 processeurs AMD 7702 tetrahexaconta core 2 Ghz (128 cores) | + | * 2 processeurs AMD 7702 tetrahexaconta-core 2 Ghz (128 cores) |
* **512 Go** de Mémoire (soit 4 GiB/coeur) | * **512 Go** de Mémoire (soit 4 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
* interconnexion Infiniband EDR (100 Gb/s) | * interconnexion Infiniband EDR (100 Gb/s) | ||
- | * OS Debian 9 | ||
- | * **2048 coeurs au total** | + | ===== Groupe |
- | + | ||
- | {{ : | + | |
- | + | ||
- | ===== Groupe | + | |
108 noeuds bi-processeurs Dell C6420 identiques, chaque noeud contenant : | 108 noeuds bi-processeurs Dell C6420 identiques, chaque noeud contenant : | ||
* 2 processeurs Intel 6226R **Cascade Lake** hexadeca-core 2,9 Ghz (32 cores) | * 2 processeurs Intel 6226R **Cascade Lake** hexadeca-core 2,9 Ghz (32 cores) | ||
* **192 Go** de Mémoire (soit 6 GiB/coeur) | * **192 Go** de Mémoire (soit 6 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
* interconnexion Infiniband FDR (56 Gb/s) | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
- | * **3456 coeurs au total** | + | ===== Groupe c6420-96 ===== |
- | {{ : | + | 8 noeuds bi-processeurs Dell C6420 identiques, chaque noeud contenant |
+ | * 2 processeurs Intel 5118 **Cascade Lake** dodeca-core 2,3 Ghz (24 cores) | ||
+ | * **96 Go** de Mémoire (soit 4 GiB/ | ||
+ | * interconnexion Infiniband FDR (56 Gb/s) | ||
+ | ===== Groupe xlr178-192 ===== | ||
- | + | 122 noeuds bi-processeurs HPE XL170r identiques, chaque noeud contenant : | |
- | + | ||
- | ===== Groupe xlr178deb192 ===== | + | |
- | + | ||
- | 120 noeuds bi-processeurs HPE XL170r identiques, chaque noeud contenant : | + | |
* 2 processeurs Intel 5218 **Cascade Lake** hexadeca-core 2,3 Ghz (32 cores) | * 2 processeurs Intel 5218 **Cascade Lake** hexadeca-core 2,3 Ghz (32 cores) | ||
* **192 Go** de Mémoire (soit 6 GiB/coeur) | * **192 Go** de Mémoire (soit 6 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
* interconnexion Infiniband FDR (56 Gb/s) | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
- | |||
- | * **3840 coeurs au total** | ||
- | {{ : | + | ===== Groupe |
- | ===== Groupe | + | |
60 noeuds bi-processeurs HPE XL170r identiques, chaque noeud contenant : | 60 noeuds bi-processeurs HPE XL170r identiques, chaque noeud contenant : | ||
* 2 processeurs Intel 6242 **Cascade Lake** hexadeca-core 2,8 Ghz (32 cores) | * 2 processeurs Intel 6242 **Cascade Lake** hexadeca-core 2,8 Ghz (32 cores) | ||
* **384 Go** de Mémoire (soit 12 GiB/coeur) | * **384 Go** de Mémoire (soit 12 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
* interconnexion Infiniband FDR (56 Gb/s) | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
- | * **1920 coeurs au total** | + | ===== Groupe c6420-384 ===== |
- | {{ : | + | 62 noeuds bi-processeurs Dell C6420 identiques, chaque noeud contenant : |
- | ===== Groupe c6420deb384 ===== | + | |
- | + | ||
- | 60 noeuds bi-processeurs Dell C6420 identiques, chaque noeud contenant : | + | |
* 2 processeurs Intel 6142 **Sky Lake** hexadeca-core 2,6 Ghz (32 cores) | * 2 processeurs Intel 6142 **Sky Lake** hexadeca-core 2,6 Ghz (32 cores) | ||
* **384 Go** de Mémoire (soit 12 GiB/coeur) | * **384 Go** de Mémoire (soit 12 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
* interconnexion Infiniband FDR (56 Gb/s) | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
- | |||
- | * **1920 coeurs au total** | ||
- | |||
- | {{ : | ||
- | |||
- | |||
===== Groupe r730gpu ===== | ===== Groupe r730gpu ===== | ||
- | 20 noeuds bi-processeurs Dell R730 identiques, chaque noeud contenant : | + | 24 noeuds bi-processeurs Dell R730 identiques, chaque noeud contenant : |
* 2 processeurs Intel E5-2637v3 **Haswell** tetra-core 3,5 Ghz (8 cores) | * 2 processeurs Intel E5-2637v3 **Haswell** tetra-core 3,5 Ghz (8 cores) | ||
* **128 Go** de Mémoire (soit 16 GiB/coeur) | * **128 Go** de Mémoire (soit 16 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
* interconnexion Infiniband FDR (56 Gb/s) | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
* 2 accélérateurs GPGPU (Nvidia RTX 2080Ti) | * 2 accélérateurs GPGPU (Nvidia RTX 2080Ti) | ||
- | * **40 GPGPU (Nvidia RTX 2080Ti) au total** | + | ===== r740bigmem ===== |
- | {{ : | + | 1 noeud bi-processeurs Dell R740 contenant |
+ | * 2 processeurs Intel 6226R **Cascade Lake** hexadeca-core 2,9 Ghz (32 cores) | ||
+ | * **1500 Go** de Mémoire (soit ~46 GiB/ | ||
+ | * interconnexion Infiniband FDR (56 Gb/s) | ||
====== Cluster E5 ====== | ====== Cluster E5 ====== | ||
Ligne 106: | Ligne 101: | ||
Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu'un **scratch** commun (**''/ | Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu'un **scratch** commun (**''/ | ||
- | * **4928 coeurs au total** | + | |
Une partie de ce cluster a été financé par **[[http:// | Une partie de ce cluster a été financé par **[[http:// | ||
- | ===== Groupe | + | ===== Groupe |
- | 34 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | + | 24 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : |
* 2 processeurs Intel E5-2667v4 **Broadwell** octa-core 3,2 Ghz (16 cores) | * 2 processeurs Intel E5-2667v4 **Broadwell** octa-core 3,2 Ghz (16 cores) | ||
* **128 Go** de Mémoire (soit 8 GiB/coeur) | * **128 Go** de Mémoire (soit 8 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
* interconnexion Infiniband FDR (56 Gb/s) | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
- | |||
- | * **544 coeurs au total** | ||
- | |||
- | {{ : | ||
- | ===== Groupe | + | ===== Groupe |
12 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | 12 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | ||
* 2 processeurs Intel E5-2697Av4 **Broadwell** hexadeca-core 2,6 Ghz (32 cores) | * 2 processeurs Intel E5-2697Av4 **Broadwell** hexadeca-core 2,6 Ghz (32 cores) | ||
* **256 Go** de Mémoire (soit 16 GiB/coeur) | * **256 Go** de Mémoire (soit 16 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
* interconnexion Infiniband FDR (56 Gb/s) | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
- | * **384 coeurs au total** | ||
- | + | ===== Groupe | |
- | {{ : | + | |
- | ===== Groupe | + | |
24 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | 24 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | ||
* 2 processeurs Intel E5-2667v4 **Broadwell** octa-core 3,2 Ghz (16 cores) | * 2 processeurs Intel E5-2667v4 **Broadwell** octa-core 3,2 Ghz (16 cores) | ||
* **256 Go** de Mémoire (soit 16 GiB/coeur) | * **256 Go** de Mémoire (soit 16 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
* interconnexion Infiniband FDR (56 Gb/s) | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
- | * **384 coeurs au total** | + | ===== Groupe |
- | + | ||
- | + | ||
- | {{ : | + | |
- | + | ||
- | ===== Groupe | + | |
- | + | ||
- | 40 noeuds bi-processeurs Dell C8220 identiques, chaque noeud contenant : | + | |
- | * 2 processeurs Intel E5-2667v2 **Ivy Bridge** octa-core 3,3 Ghz (16 cores) | + | |
- | * **128 Go** de Mémoire (soit 8 GiB/ | + | |
- | * **/scratch global 71 TiB (''/ | + | |
- | * interconnexion Infiniband FDR (56 Gb/s) | + | |
- | * OS Debian 9 | + | |
- | + | ||
- | * **640 coeurs au total** | + | |
- | + | ||
- | {{ : | + | |
- | + | ||
- | + | ||
- | + | ||
- | ===== Groupe c8220deb256 | + | |
// | // | ||
- | 24 noeuds bi-processeurs Dell c8220 identiques, chaque noeud contenant : | + | 32 noeuds bi-processeurs Dell c8220, chaque noeud contenant : |
* 2 processeurs Intel E5-2670 **Sandy Bridge** octa-core 2,60 Ghz (16 cores) | * 2 processeurs Intel E5-2670 **Sandy Bridge** octa-core 2,60 Ghz (16 cores) | ||
- | * **256 Go** de Mémoire (soit 16 GiB/coeur) | + | * **256 Go** de Mémoire (soit 16 GiB/coeur), ou **128 Go** (4 noeuds), ou **64 Go** (4 noeuds) |
- | | + | * **/scratch local de 2 TiB (''/ |
- | * **/scratch local de 2 TiB (''/ | + | |
* interconnexion Infiniband FDR (56 Gb/s) | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
- | |||
- | * **384 coeurs au total** | ||
- | |||
- | {{ : | ||
- | ===== Groupe c8220deb128 ===== | ||
- | |||
- | // | ||
- | |||
- | * **6 groupes de 24 noeuds chacun** : c8220deb128A, | ||
- | |||
- | |||
- | 144 noeuds bi-processeurs Dell c8220 identiques, chaque noeud contenant : | ||
- | * 2 processeurs Intel E5-2670 **Sandy Bridge** octa-core 2,60 Ghz (16 cores) | ||
- | * **128 Go** de Mémoire (soit 8 GiB/coeur) | ||
- | * **/scratch global 71 TiB (''/ | ||
- | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | * OS Debian 9 | ||
- | |||
- | * **2 304 coeurs au total** | ||
- | {{ : | + | ===== Cloud@PSMN (IFB) ===== |
+ | Voir [[https:// | ||
- | ===== Clusters de formation et d' | + | ====== Clusters de formation et d' |
- | Les machines du CBP sont actuellement décrites sur ces pages : | + | Les machines du CBP sont actuellement décrites sur ces pages : |
- | * [[http:// | + | * [[http:// |
- | * [[http:// | + | * [[http:// |
+ | * [[http:// | ||