Description matérielle

Historique

  • La plateforme initiale a été acquise en 2011
  • Une extension est ajoutée en 2014 ( nouds + stockage )
  • En octobre 2017 , sont renouvellés les 2 serveurs de login, la plateforme d'administration et la solution de stockage

Les noeuds de calcul

3024 cores pour une puissance crête totale d’environ 52 Tflops

Génération LICALLO 2011  :  10,5 TFlops

Génération LICALLO 2014  :  41.4 TFlops

Génération #Noeuds Proc RAM GPUs Infiniband
Licallo 2011 74 bi cpus Intel Xeon X5660 à 2.8GHz ; 2 x 6 coeurs 48 Go   QDR-40 Gb/s
Licallo 2011 8 bi cpus Intel Xeon E5620 à 2.40GHz ; 2 x 4 coeurs 24 Go  2 * NVIDIA Tesla M2050 QDR-40 Gb/s
Licallo 2014 102 bi cpus Intel Xeon IvyBridge E5-2670 v2 à 2.50GHz ; 2 x 10 coeurs 64 Go    FDR-56Gb/s
Licallo 2014 1 quadri cpus Intel Xeon E5-4650L à 2.60GHz ; 4 x 8 coeurs 1 To    FDR-56 Gb/s

 

Les noeuds de la génération 2011 sont au format ’lames’ de type B500, dans des chassis Inca( 18 par chassis )

( chaque noeud GPU occupe un double emplacement dans le chassis )

Les noeuds de la génération 2014 sont groupés par 2 dans une lame occupant 2 emplacements dans des chassis B510

Le bullx R4 428-E3 est un serveur de format 2U

Les 2 noeuds frontaux de type PowerEdge R630 (1U) : castor et pollux

 Ces noeuds sont dédiés aux connexions utilisateur par ssh.

  • 2 proc Intel E5-2640cv4 à 2.4 GHz; 10 coeurs
  • 64 Go RAM
  • 2 DD SAS de 600 Go en Raid 1 
  • carte IB Mellanox double port

Le noeud d'administration gemini de type PowerEdge R630

Ce noeud gère toutes les tâches administratives de la platefome

  • 2 proc Intel E5-2640cv4 à 2.4 GHz; 10 coeurs
  • 64 Go RAM
  • 2 DD SAS de 600 Go en Raid 1  pour l'OS
  • 3 DD SAS de 1.2 To en raid 5 pour les applicatifs
  • 2 ports réseau 1Gb-rj45  + 2 ports réseau 10 Gb- SFP
  • carte IB Mellanox double port

L'espace de stockage

L'architecture de la solution de stockage s'appuie sur la technologie BeegFS; pour la partie matérielle :

 

Archivage

L’archivage est assuré par un serveur bullx R423-E3 connecté à une baie de disques NetApp E2600 par une double connexion SA 6Gbs.

20 disques 4 TB , 7.2 t ; 80 TB brutes en 2 raid6

 

Configuration logicielle

 

 

  • Toutes les machines ont été updatés en CentOS 7.3
  • Le compilateur Intel dernière version est disponible, intégrant la librairie MPI 

  • Environnement

Utilisation des modules

  • Les applications disponibles

Liste des softs 

  • La soumission

Utilisation du logiciel de soumission slurm 

  • Règles de bonne conduite

ne pas demander plus de cores que nécessaire
ne pas demander plus de temps que nécessaire