Cahier des charges pour la migration et l`évolution d

- C.C.T.P. -
LMT, ENS de Cachan
Cahier des charges pour la migration et l'évolution d'un cluster
existant dans une nouvelle salle informatique
Le projet consiste à transporter et à reconnecter dans une nouvelle salle informatique, un cluster
existant actuellement installé dans trois salles différentes et également de faire évoluer la
configuration.
Cluster existant:
•
•
•
•
•
•
•
une baie 42U comprenant 2 switchs et 28 nœuds 1 U , à l'étage
une baie 42U comprenant 2 switchs et 8 nœuds 4U au sous sol
2 frontaux 1U dans le local du sous sol (redondance via LinuxHA)
2 serveurs de fichiers 1U (redondance via LinuxHA) pour le pilotage d'une baie RAID
dans un local du rez-de-chaussée
4 commutateurs 48 ports gérants 3 réseaux ( administration, calcul, stockage)
les nœuds disposent d'une interface réseau sur chacun des trois réseaux ci-dessus ainsi
qu'une interface IPMI
les nœuds graphiques ont une quatrième carte pour une connexion directe sur le réseau du
centre de calcul
Evolutions envisagées :
•
•
•
•
augmentation de la capacité de stockage
augmentation du nombre de nœuds calcul
augmentation du nombre de commutateurs réseau
options supplémentaires :
• acquisition de nœuds SMP
• acquisition d'un système KVM 64 ports
Configuration de la nouvelle salle informatique.
Cette salle est située au sous sol du laboratoire, sans ouverture vers l'extérieur, mesure 5.16m x 4.66
m et est d'une hauteur sous plafond de 2.85m. Elle dispose d'un ensemble de 6 baies de 60 cm x
1.10m au sol et d'une hauteur de 2.05 m.
La consommation électrique estimée pour la configuration projetée sur 2 ans est de 85kW.
L'alimentation ondulée et la climatisation ont été dimensionnées en conséquence. La configuration
de la salle est schématisée dans la figure ci-dessous.
Chaque baie disposera de 6 prises protégées individuellement par un disjoncteur 16A pour
connecter des barrettes d'alimentation.
Installation de l'existant dans les nouvelles baies.
● Baie No 1:
•
•
•
•
•
Les 2 frontaux redondés
Les 2 serveurs de stockage
La baie RAID
La console
Le KVM
● Baie No 2:
• 3 Commutateurs 48 ports cascadés pour le réseau de stockage
• 2 Nœuds graphiques 4U
• 5 Nœuds calcul 1U
● Baie No 3:
• 2 Commutateurs 48 ports cascadés pour le réseau d'administration
• 2 Nœuds graphiques 4U
• 5 Nœuds calcul 1U
● Baie No 4:
• 2 Commutateurs 48 ports cascadés pour le réseau calcul
• 2 Nœuds graphiques 4U
• 5 Nœuds calcul 1U
● Baie No 5:
•
•
1 Nœud graphique 4U
4 Nœuds calcul 1U
● Baie No 6:
•
•
1 Nœud graphique 4U
4 Nœuds calcul 1U
Détail des évolutions envisagées :
Augmentation de l'espace disque connecté au réseau de stockage pour atteindre 24 To minimum.
Acquisition de nouveaux nœuds de calcul (entre 150 et 200 cœurs):
• Processeurs 4 cœurs, fréquence minimum 2.66 Ghz, compatible X86-64
• au minimum 4 Go de mémoire centrale par cœur
• un nombre le plus élevé possible de cœurs par nœud et par rack de 1U ou 2U pour limiter
l'augmentation de la dissipation thermique globale
•
•
au moins 250 Go de disque local par noeud
3 interfaces réseau 1 Gigabit/s et interface IPMI
Acquisition de commutateurs supplémentaires pour les trois réseaux.
• Trois commutateurs 48 ports Gigabit
Option, acquisition de nouveaux nœuds SMP
• Processeurs 4 cœurs ou plus, fréquence minimum 2.66 Ghz, compatible X86-64
• Une carte mère permettant d'atteindre au moins 8Go de mémoire centrale par cœurs afin de
concentrer un maximum de mémoire centrale sur une même carte mère
• au moins 250 Go de disque local pour 8 cœurs
• 3 interfaces réseau 1 Gigabit/s et interface IPMI
Option, acquisition d'un système de KVM standard ou IP pour la maintenance sur place
• Configuration pour 64 noeuds
Détail des prestations attendues :
•
•
•
•
•
•
Démontage et réinstallation du matériel existant
Installation de nouveaux nœuds de calcul (OS Debian , connexion au réseau, configuration
interface IPMI, …)
Reconfiguration globale du système de stockage RAID
Installation de nouveaux commutateurs et reconfiguration des VLANs (administration,
calcul et stockage)
Proposition de maintenance sur 3 ans
Options :
• Installation de nœuds SMP et d'un système KVM.
• Mise à jour globale des systèmes.
• Proposition de maintenance J+1 globale sur 3 ans