Connexion  au cluster de calcul Licallo : Seules les connexions sécurisées sont autorisées sur les machines de login vous devez donc avoir un client ssh installé sur votre machine . Vous pouvez contacter votre service informatique si ce n’est pas le cas.

 Les espaces disques disponibles

L'environnement module : Le gestionnaire d’environnement module fourni par la distribution CentOS  permet de configurer les variables d’environnements adaptées à votre programme.

Liste des logiciels installés


 

Espace disque global

Le nouveau cluster Licallo donne accès à 275 TO utiles, monté par GPFS

Cet espace GPFS est accessible par les noeuds de type nXXX sur le réseau infiniband QDR 40 Gbit/s et par les noeuds de type pXXX sur le réseau Infiniband FDR 56 Gbit/s.

 

Vos répertoires

  • Vous avez un répertoire personnel dans /home, limité à 20 G par utilisateur ; Ces données sont sauvegardées par notre robot Tina ; cet espace vous permet de stocker, développer vos codes et non stocker vos données de calcul
  • Zone de données temporaires : /scratch

Dans cet espace , vous devez avoir un répertoire de travail

[ ~ ] 
[ ~ ] cd  /scratch/<username>
Cette zone de données temporaires n’est pas sauvegardée ;

Aucune limite à l’utilisation de ce /scratch ; par contre les utilisateurs trop gourmands seront avertis et nous ferons le ménage.

Attention: Suite à décision du comité des utilisateurs réuni en 2015, une procédure de purge automatique permet de mettre à la poubelle tous les fichiers vieux de plus de 8 mois. Cette poubelle est supprimée définitivement au bout de 2 mois.Cette procédure est exécutée dès que le taux d'occupation dépasse les 85%.

 


 

Gestionnaire de ressources OAR

  • Commandes utiles

Pour toute commande OAR, vous avez un man

oarsub permet de soumettre u job ; se référer à cet article spécifique

oarstat permet d’afficher l’état des jobs

Afficher tous les jobs

[willm@tagir ~]$ oarstat
Job id     Name           User           Submission Date     S Queue
---------- -------------- -------------- ------------------- - ----------
3779       vb2048         alainm         2011-10-24 14:43:39 R default   
3789       vbc_passif1024 alainm         2011-10-24 15:31:58 R default   
[willm@tagir ~]$

Afficher les propriétés du job 3779

[willm@tagir ~]$ oarstat -fj 3779

Afficher uniquement ses jobs

[willm@tagir ~]$ oarstat  -ju

oardel supprime un de vos jobs

[willm@tagir ~]$ oarstat  -ju

Seul l’administrateur peut tuer un job de n’importe quel utilisateur.

oarnodes affiche des informations sur les ressources du cluster ; elles ne sont pas faciles à consulter, aussi il est préférable d’utiliser l’outil graphique monika présenté ci-dessous

  • Les ressources OAR
  • Les variables d’environnement ( PATH et celles de OAR)
  • Les propriétés des ressources
  • Soumission et suivi d’un job

 

Outils de visualisation

ganglia

Cette page Web permet de visualiser l’activité des nœuds du cluster sous forme de graphiques.On peut voir , pour l’ensemble du cluster, ou pour chaque nœud :

  • charge cpu
  • utilisation mémoire
  • utilisation disque
  • utilisation réseau

monika

Page Web permettant de visualiser l’utilisation actuelle du cluster .

Pour chaque core de chaque nœud est indiqué son état : soit "Free", soit le n° du job qui s’exécute ; en cliquant sur cette ressource , sont affichées des informations plus précises sur le job en cours.

Suivent des informations détaillées sur tous les jobs en cours.( équivalent graphique de oarstat )

drawgantt

Cette page Web affiche le diagramme de Gantt permettant de visualiser dans le temps la répartition des jobs sur les noeuds tel que OAR les a lancé et tel qu’il prévoit de les lancer.Cette répartition évolue dans le temps , à chaque fois qu’un job se termine, ou quand un job est soumis.

Ce diagramme est très utile pour voir l’occupation du cluster dans le passé , le présent et dans le futur pour savoir quand OAR prévoit de lancer son job !

 

Mathematica

ne lancer mathematica que à partir d’un noeud

[willm@master2 ]$ oarsub -lnodes=1,walltime=8:00:00 -I

la première fois, pour activer mathematica :

* choisir ’Other ways to activate’

* puis ’Connect to a network license server’

* puis "server name master2"

Aller au haut