wiki:Tutorial/SystemInfo

Version 21 (modified by jouvin, 16 years ago) (diff)

--

Système d'Information

Dans la grille EGEE/LCG, il existe deux systèmes pour trouver les états deservices. Le principal s'appelle le BDII et est basé sur LDAP. Il sert à décrire les ressources disponibles dans la grille et leur état. L'autre système s'appelle R-GMA (Relational GridMonitoring Architecture). R-GMA est basé sur une base de donnée distribuée. Il est principalement utilisé pour le monitoring des jobs et pour l'accounting.

BDII (LDAP)

Le BDII est basé sur la technologie LDAP qui permet une organisation hiérarchique de l'information. L'information doit adhérer à un schema. Le schéma des informations utilisé par le BDII s'appelle "GLUE". Pour plus de détail, voir la définition du GLUE Schema.

La Commande lcg-infosites

gLite fournit la commande lcg-infosites pour interroger le BDII. Elle cache la complexité de la syntaxe de la ldapsearch. Le but principal de la commande lcg-infosites est d'identifier les ressources disponibles pour une VO particulière. Pour cela on utilise l'option --vo voname. Le principal paramètre de cette commande est le type de ressource cherchée : ce, se, wms, lfc... Utiliser l'option --help pour obtenir la liste de tous les types de service.

Note: l'utilisation de la commande lcg-infosites ne nécessite d'avoir un proxy.

Exercices :

  1. Identifier la liste de tous les computing elements (CE) accessibles à la VO vo.lal.in2p3.fr.
  2. Identifier la liste de tous les storage elements (SE) accessibles à la VO vo.lal.in2p3.fr.
  3. Identifier la liste de tous les WMS (type wms) accessibles à la VO vo.lal.in2p3.fr.
  4. Identifier la liste de tous les serveurs LFC accessibles à la VO vo.lal.in2p3.fr.

Usage Direct de LDAP

L'utilisation directe de ldapsearch permet des sélections plus complexes ou d'obtenir la valeur de certains attributs particulier. Cela peut être utile pour des besoins particuliers mais l'utilisation de lcg-infosites doit être préférée chaque fois que c'est possible.

Note: la commande ldapsearch est totalement indépendante de la grille et ne nécessite d'avoir un proxy.

Excercices (facultatif) :

  1. Allez sur le site web GStat et visualisez les différentes informations présentées pour chaque site. Cliquez sur un site puis regardez dans la section "Site General Information". Trouvez le site GRIF.
  2. En utilisant la commande ldapsearch, interrogez le site BDII de GRIF, bdii.grif.fr. Pour LDAP, chaque entrée possède un identifiant (dn) et une liste d'attributs avec leurs valeurs.
    ldapsearch -x -h bdii.grif.fr -p 2170 -b mds-vo-name=GRIF,o=grid
    
  3. Interrogez le top-level BDII topbdii.grif.fr de manière à afficher la liste des CE répertoriés, ainsi que les Storage Elements (SEs) associés :
    ldapsearch -x -h topbdii.grif.fr -p 2170 -b mds-vo-name=local,o=grid 'objectclass=GlueCESEBind' GlueCESEBindCEUniqueID GlueCESEBindSEUniqueID
    
  4. Listez les CE répertoriés dans le BDII précédent et publiant le tag GLITE-3_0_9. Cet attribut est utilisé pour trouver les sites équipés avec les logiciels spécifiques. Dans les pages GStat, combien de tags différents peut-on trouver ?
    ldapsearch -x -h topbdii.grif.fr -p 2170 \
                  -b 'mds-vo-name=local,o=grid' 'objectclass=GlueSubCluster' GlueChunkKey \ 
                  GlueHostApplicationsSoftwareRunTimeEnvironment: GLITE-3_0_9
    
  5. Listez ensuite les SE supportant la VO "dteam". Refaites la commande pour la VO vo.lal.in2p3.fr.
    ldapsearch -x -h topbdii.grif.fr -p 2170 \
                     -b 'mds-vo-name=local,o=grid'
                    'objectclass=GlueSATop' GlueChunkKey \
                    GlueSAAccessControlBaseRule | grep -B 4 dteam
    

R-GMA (Relational Grid Monitoring Architecture)

Les informations disponibles dans R-GMA sont accessibles via un browser web et aussi via des lignes de commande. Les informations ne sont cependant pas complètes, mais l'outil est intéressant pour voir les types d'informations dans le schéma.

Browser R-GMA

Une page web permet de chercher les informations dans R-GMA.Utilisez un navigateur pour visualiser cette page.

  • La liste sur l'extrême gauche contient les requêtes prédéfinies. Pour voir les services publiés dans le système d'informations, cliquez sur le lien"GlueServices" (extrême gauche). Puis cliquez sur le bouton "Query". La liste inclut les services R-GMA et quelques autres types de services. Si rien ne s'affiche, ressayez avec un "timeout" plus grand, par exemple * secondes.
  • Pour voir les CEs dans le système d'information, cliquez sur "TableSets" (extrême gauche) puis sur "GlueCE". Dans la liste "SELECT" on peutvoir les champs de la table GlueCE. Par défaut, tous les champs sont sélectionnés. Cliquez sur le bouton "Query" pour visualiser les informations. Encore on peut-être doit utiliser un "timeout" plus grand.

R-GMA : la ligne des commandes

La ligne de commande offre la même fonctionnalité. Dans grid*.lal.in2p3.fr tapez la commande rgma (pour sortir taper quit). Cette commande démarre une console R-GMA qui permet d'interroger le système. La syntaxe pour les requêtes est très proche du SQL.

Exercices (facultatif) :

  • On peut visualiser l'aide avec la commande help et des exemples avec help examples.
    show tables
    
  • Pour voir toutes les tables d'informations tapez :
    describe
    
  • Pour visualiser les informations sur une table, donnez son nom en paramètre. Par exemple :
    describe GlueService
    
  • Pour afficher la liste des services, utiliser la commande suivante. On peut aussi sélectionner un site particulier :
    select * from GlueService
    select * from GlueService where GlueSite_UniqueId="GRIF"
    
  • Pour voir les informations dans la table "GlueCE", utilisez une commande similaire. On peut aussi indiquer des critères de sélection, comme précédemment. Par exemple :
    select * from GlueCE
    select UniqueId,FreeCpus from GlueCE where FreeCpus > *