Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentesRévision précédenteProchaine révision | Révision précédenteProchaine révisionLes deux révisions suivantes | ||
documentation:clusters:hardware [2020/12/03 16:02] – [Configuration matérielle des clusters] gilquin | documentation:clusters:hardware [2023/07/06 15:28] – [Configuration matérielle des clusters] ltaulell | ||
---|---|---|---|
Ligne 1: | Ligne 1: | ||
- | |||
====== Configuration matérielle des clusters ====== | ====== Configuration matérielle des clusters ====== | ||
Description du matériel disponible dans les différents clusters du PSMN. | Description du matériel disponible dans les différents clusters du PSMN. | ||
- | * Les files d' | + | <WRAP center round important 60%> |
- | * Les serveurs de compilation, | + | |
- | + | ||
- | * Nombre total de coeurs actifs **17 824** pour **660** serveurs. | + | |
- | ====== Cluster Lake ====== | + | **[[http:// |
+ | See also our [[news: | ||
+ | </ | ||
- | Les machines de ce cluster partagent | + | Tous les clusters utilisent |
- | * **12 928 coeurs au total** | + | <WRAP center round information 60%> |
+ | [[news: | ||
+ | </ | ||
+ | ====== Cluster Cascade ====== | ||
+ | Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu'un **scratch** commun (**''/ | ||
- | ===== Groupe EPYC7702deb512 ===== | + | * **16 416 coeurs au total** |
- | 14 noeuds bi-processeurs Dell C6525 identiques, chaque noeud contenant : | + | ===== Groupe S92 ===== |
- | * 2 processeurs AMD 7702 tetrahexaconta core 2 Ghz (128 cores) | + | |
- | * **512 Go** de Mémoire (soit 4 Go/coeur) | + | |
- | * **/scratch global 71To (''/ | + | |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
- | | + | 171 noeuds bi-processeurs Intel S9200WK identiques, chaque noeud contenant : |
+ | | ||
+ | | ||
+ | * interconnexion Infiniband HDR/EDR (100 Gb/s) | ||
- | {{ : | ||
- | ===== Groupe c6420deb192 | + | ====== Cluster Lake ====== |
- | 108 noeuds bi-processeurs Dell C6420 identiques, chaque noeud contenant : | ||
- | * 2 processeurs Intel 6226R **Cascade Lake** hexadeca-core 2,9 Ghz (32 cores) | ||
- | * **192 Go** de Mémoire (soit 6 Go/coeur) | ||
- | * **/scratch global 71To (''/ | ||
- | * interconnexion Infiniband FDR (56Gb/s) | ||
- | * OS Debian 9 | ||
- | | + | Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu' |
- | {{ : | + | * **13 472 coeurs au total** |
+ | ===== Groupe Epyc ===== | ||
+ | 14 noeuds bi-processeurs Dell C6525 identiques, chaque noeud contenant : | ||
+ | * 2 processeurs AMD 7702 tetrahexaconta-core 2 Ghz (128 cores) | ||
+ | * **512 Go** de Mémoire (soit 4 GiB/coeur) | ||
+ | * interconnexion Infiniband EDR (100 Gb/s) | ||
- | ===== Groupe | + | ===== Groupe |
- | 120 noeuds bi-processeurs | + | 108 noeuds bi-processeurs |
- | * 2 processeurs Intel 5218 **Cascade Lake** hexadeca-core 2,3 Ghz (32 cores) | + | * 2 processeurs Intel 6226R **Cascade Lake** hexadeca-core 2,9 Ghz (32 cores) |
- | * **192 Go** de Mémoire (soit 6 Go/coeur) | + | * **192 Go** de Mémoire (soit 6 GiB/coeur) |
- | * **/scratch global 71To (''/ | + | * interconnexion Infiniband FDR (56 Gb/s) |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
- | | + | ===== Groupe c6420-96 ===== |
+ | |||
+ | 8 noeuds bi-processeurs Dell C6420 identiques, chaque noeud contenant : | ||
+ | | ||
+ | * **96 Go** de Mémoire (soit 4 GiB/ | ||
+ | * interconnexion Infiniband FDR (56 Gb/s) | ||
+ | |||
+ | ===== Groupe xlr178-192 ===== | ||
+ | |||
+ | 122 noeuds bi-processeurs HPE XL170r identiques, chaque noeud contenant : | ||
+ | * 2 processeurs Intel 5218 **Cascade Lake** hexadeca-core 2,3 Ghz (32 cores) | ||
+ | * **192 Go** de Mémoire (soit 6 GiB/ | ||
+ | * interconnexion Infiniband FDR (56 Gb/s) | ||
- | {{ : | + | ===== Groupe |
- | ===== Groupe | + | |
60 noeuds bi-processeurs HPE XL170r identiques, chaque noeud contenant : | 60 noeuds bi-processeurs HPE XL170r identiques, chaque noeud contenant : | ||
* 2 processeurs Intel 6242 **Cascade Lake** hexadeca-core 2,8 Ghz (32 cores) | * 2 processeurs Intel 6242 **Cascade Lake** hexadeca-core 2,8 Ghz (32 cores) | ||
- | * **384 Go** de Mémoire (soit 12 Go/coeur) | + | * **384 Go** de Mémoire (soit 12 GiB/coeur) |
- | * **/scratch global 71To (''/ | + | * interconnexion Infiniband FDR (56 Gb/s) |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
- | * **1920 coeurs au total** | + | ===== Groupe c6420-384 ===== |
- | {{ : | + | 62 noeuds bi-processeurs Dell C6420 identiques, chaque noeud contenant : |
- | ===== Groupe c6420deb384 ===== | + | |
- | + | ||
- | 60 noeuds bi-processeurs Dell C6420 identiques, chaque noeud contenant : | + | |
* 2 processeurs Intel 6142 **Sky Lake** hexadeca-core 2,6 Ghz (32 cores) | * 2 processeurs Intel 6142 **Sky Lake** hexadeca-core 2,6 Ghz (32 cores) | ||
- | * **384 Go** de Mémoire (soit 12 Go/coeur) | + | * **384 Go** de Mémoire (soit 12 GiB/coeur) |
- | * **/scratch global 71To (''/ | + | * interconnexion Infiniband FDR (56 Gb/s) |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
- | + | ||
- | * **1920 coeurs au total** | + | |
- | + | ||
- | {{ : | + | |
- | + | ||
===== Groupe r730gpu ===== | ===== Groupe r730gpu ===== | ||
- | 20 noeuds bi-processeurs Dell R730 identiques, chaque noeud contenant : | + | 24 noeuds bi-processeurs Dell R730 identiques, chaque noeud contenant : |
* 2 processeurs Intel E5-2637v3 **Haswell** tetra-core 3,5 Ghz (8 cores) | * 2 processeurs Intel E5-2637v3 **Haswell** tetra-core 3,5 Ghz (8 cores) | ||
- | * **128 Go** de Mémoire (soit 16 Go/coeur) | + | * **128 Go** de Mémoire (soit 16 GiB/coeur) |
- | * **/scratch global 71To (''/ | + | * interconnexion Infiniband FDR (56 Gb/s) |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
* 2 accélérateurs GPGPU (Nvidia RTX 2080Ti) | * 2 accélérateurs GPGPU (Nvidia RTX 2080Ti) | ||
- | * **40 GPGPU (Nvidia RTX 2080Ti) au total** | + | ===== r740bigmem ===== |
- | {{ : | + | 1 noeud bi-processeurs Dell R740 contenant |
+ | * 2 processeurs Intel 6226R **Cascade Lake** hexadeca-core 2,9 Ghz (32 cores) | ||
+ | * **1500 Go** de Mémoire (soit ~46 GiB/ | ||
+ | * interconnexion Infiniband FDR (56 Gb/s) | ||
====== Cluster E5 ====== | ====== Cluster E5 ====== | ||
Ligne 106: | Ligne 101: | ||
Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu'un **scratch** commun (**''/ | Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu'un **scratch** commun (**''/ | ||
- | * **4640 coeurs au total** | + | * **1664 coeurs au total** |
Une partie de ce cluster a été financé par **[[http:// | Une partie de ce cluster a été financé par **[[http:// | ||
- | ===== Groupe | + | ===== Groupe |
- | 34 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | + | 24 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : |
* 2 processeurs Intel E5-2667v4 **Broadwell** octa-core 3,2 Ghz (16 cores) | * 2 processeurs Intel E5-2667v4 **Broadwell** octa-core 3,2 Ghz (16 cores) | ||
- | * **128 Go** de Mémoire (soit 8 Go/coeur) | + | * **128 Go** de Mémoire (soit 8 GiB/coeur) |
- | * **/scratch global 71To (''/ | + | * interconnexion Infiniband FDR (56 Gb/s) |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
- | + | ||
- | * **544 coeurs au total** | + | |
- | + | ||
- | {{ : | + | |
- | ===== Groupe | + | ===== Groupe |
12 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | 12 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | ||
* 2 processeurs Intel E5-2697Av4 **Broadwell** hexadeca-core 2,6 Ghz (32 cores) | * 2 processeurs Intel E5-2697Av4 **Broadwell** hexadeca-core 2,6 Ghz (32 cores) | ||
- | * **256 Go** de Mémoire (soit 16 Go/coeur) | + | * **256 Go** de Mémoire (soit 16 GiB/coeur) |
- | * **/scratch global 71To (''/ | + | * interconnexion Infiniband FDR (56 Gb/s) |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
- | * **384 coeurs au total** | ||
- | + | ===== Groupe | |
- | {{ : | + | |
- | ===== Groupe | + | |
24 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | 24 noeuds bi-processeurs Dell C6320 identiques, chaque noeud contenant : | ||
* 2 processeurs Intel E5-2667v4 **Broadwell** octa-core 3,2 Ghz (16 cores) | * 2 processeurs Intel E5-2667v4 **Broadwell** octa-core 3,2 Ghz (16 cores) | ||
- | * **256 Go** de Mémoire (soit 16 Go/coeur) | + | * **256 Go** de Mémoire (soit 16 GiB/coeur) |
- | * **/scratch global 71To (''/ | + | * interconnexion Infiniband FDR (56 Gb/s) |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
- | * **384 coeurs au total** | + | ===== Groupe |
- | + | ||
- | + | ||
- | {{ : | + | |
- | + | ||
- | ===== Groupe | + | |
- | + | ||
- | 40 noeuds bi-processeurs Dell C8220 identiques, chaque noeud contenant : | + | |
- | * 2 processeurs Intel E5-2667v2 **Ivy Bridge** octa-core 3,3 Ghz (16 cores) | + | |
- | * **128 Go** de Mémoire (soit 8 Go/coeur) | + | |
- | * **/scratch global 71To (''/ | + | |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 7 | + | |
- | + | ||
- | * **640 coeurs au total** | + | |
- | + | ||
- | {{ : | + | |
- | + | ||
- | + | ||
- | + | ||
- | ===== Groupe c8220deb256 | + | |
// | // | ||
- | 24 noeuds bi-processeurs Dell c8220 identiques, chaque noeud contenant : | + | 32 noeuds bi-processeurs Dell c8220, chaque noeud contenant : |
* 2 processeurs Intel E5-2670 **Sandy Bridge** octa-core 2,60 Ghz (16 cores) | * 2 processeurs Intel E5-2670 **Sandy Bridge** octa-core 2,60 Ghz (16 cores) | ||
- | * **256 Go** de Mémoire (soit 16 Go/coeur) | + | * **256 Go** de Mémoire (soit 16 GiB/ |
- | * **/scratch global 71To (''/ | + | * **/ |
- | * **/scratch local de 2To (''/ | + | * interconnexion Infiniband |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
- | + | ||
- | * **384 coeurs au total** | + | |
- | + | ||
- | {{ : | + | |
- | ===== Groupe c8220deb128 ===== | + | |
- | + | ||
- | // | + | |
- | + | ||
- | * **6 groupes de 24 noeuds chacun** : c8220deb128A, c8220deb128B, | + | |
- | + | ||
- | + | ||
- | 144 noeuds bi-processeurs Dell c8220 identiques, chaque noeud contenant : | + | |
- | * 2 processeurs Intel E5-2670 **Sandy Bridge** octa-core 2,60 Ghz (16 cores) | + | |
- | * **128 Go** de Mémoire | + | |
- | * **/scratch global 71To (''/ | + | |
- | * interconnexion Infiniband FDR (56Gb/s) | + | |
- | * OS Debian 9 | + | |
- | + | ||
- | * **2 304 coeurs au total** | + | |
- | + | ||
- | {{ : | + | |
- | + | ||
- | + | ||
- | ====== Cluster x55/x56 (ou X5) ====== | + | |
- | + | ||
- | + | ||
- | Les machines de ce cluster partagent le même arbre Infiniband (pour OpenMPI), ainsi qu'un **scratch** commun (**''/ | + | |
- | + | ||
- | <note warning> | + | |
- | ===== Groupe sl390lin48 ===== | + | |
- | + | ||
- | 23 noeuds | + | |
- | * 2 processeurs Intel X5672 **Westmere** tetra-coeurs 3,2 Ghz (8 cores) | + | |
- | * **48 Go** de Mémoire (soit 6 Go/coeur) | + | |
- | * **/scratch global 34To (''/ | + | |
- | * interconnexion Infiniband QDR (40Gb/s) | + | |
- | * OS Debian 9 | + | |
- | + | ||
- | {{ : | + | |
- | + | ||
- | + | ||
- | ===== Groupe sl390lin24 ===== | + | |
- | + | ||
- | 40 noeuds bi-processeurs HP SL390 identiques, chaque noeud contenant : | + | |
- | | + | |
- | * **24 Go** de Mémoire | + | |
- | * **/scratch global 34To (''/ | + | |
- | * interconnexion Infiniband QDR (40Gb/s) | + | |
- | * OS Debian 9 | + | |
- | + | ||
- | {{ : | + | |
- | + | ||
- | + | ||
- | + | ||
- | ===== Groupe c6100lin24 ===== | + | |
- | + | ||
- | 32 noeuds | + | |
- | * 2 processeurs Intel X5650 **Westmere** hexa-coeurs 2,66 Ghz (12 cores) | + | |
- | * **24 Go** de Mémoire (soit 2 Go/coeur) | + | |
- | * **/ | + | |
- | * interconnexion Infiniband QDR (40Gb/s) | + | |
- | * OS Debian 9 | + | |
- | + | ||
- | {{ : | + | |
- | + | ||
- | ===== Groupes r422 ===== | + | |
- | + | ||
- | **5 groupes | + | |
- | + | ||
- | 120 noeuds bi-processeurs Bull R422 E2 identiques, chaque noeud contenant : | + | |
- | * 2 processeurs Intel X5570 **Nehalem** tetra-coeurs 2,93 Ghz (8 cores) | + | |
- | * **24 Go** de Mémoire (soit 3 Go/coeur) | + | |
- | * **/scratch global 34To (''/ | + | |
- | * interconnexion Infiniband QDR (40Gb/s) | + | |
- | * OS Debian 9 | + | |
- | + | ||
- | {{ : | + | |
- | + | ||
- | ===== Groupe r815lin128 ===== | + | |
- | + | ||
- | 8 noeuds | + | |
- | * 4 processeurs AMD Opteron 6134 **Magny-Cours** octa-coeurs 2,3 Ghz (32 cores) | + | |
- | * **128 Go** de Mémoire (soit 4 Go/coeur) | + | |
- | * **/scratch global 34To (''/ | + | |
- | * interconnexion Infiniband | + | |
- | * OS Debian 9 | + | |
- | {{ : | + | ===== Cloud@PSMN (IFB) ===== |
+ | Voir [[https:// | ||
- | ===== Clusters de formation et d' | + | ====== Clusters de formation et d' |
- | Les machines du CBP sont actuellement décrites sur ces pages : | + | Les machines du CBP sont actuellement décrites sur ces pages : |
- | * [[http:// | + | * [[http:// |
- | * [[http:// | + | * [[http:// |
+ | * [[http:// | ||