DIRAC Project meeting

jeudi 15 juin 2017, 14:00 → 16:00 Europe/Paris

Visio RMS

The DIRAC@IN2P3 Project meeting to review the progress in various activities

 

Connexion à la conférence

Connexion depuis un terminal individuel (PC, Mac, Tablette, Smartphone ...)	http://desktop.visio.renater.fr/scopia?ID=729851***1898&autojoin
Manuel d'installation de Scopia Desktop	doc_scopia_desktop-fr.pdf
IP	194.214.202.146
Téléphone ou RNIS	+33 (0)1 85 58 86 07
GDS	+33 (0)1 85 58 86 07 729851
SIP	sip:729851@195.98.238.109
H.323	h323:729851@mgmt.visio.renater.fr
Numéro de la conférence	729851 (terminer par #)
Code d'accès	1898 (terminer par #)

Notes du meeting du 15 Juin 2017
--------------------------------

Nouvelles du Projet
+ Face2Face LUPM 17/07/2017
+ mission Sorina Montpellier -> invitation Andrei
+ EAOM demande 12k euros pour 2018
+ Andrei mail ETP CC (déclaration 15 juillet sur les premiers 6 mois)
 

Dirac User Workshop
+ 31 participants - stable, bon développement de la communauté
+ sessions hackaton/hands-on très intéressantes
++ installation from scratch, à partir du VM vide
+ Feedback des utilisateurs
++ les utilisateurs trouvent les release plus stables qu'avant !?
++ les utilisateurs demandent plus de features sur le data management
   DIRAC fait DM et WMS, très attrayant pour les utilisateurs
+ EL7/CentOS7
++ tout ne fonctionne pas encore, surtout côté serveurs
++ côté client, fonctionne à "90%"...
++ pression sur les développeurs, pouvoir migrer les serveurs sur CentOS7 serait une bonne chose.
+ Roadmap
+ Consortium Board
++ nouveau partenaire invité PNNL, impliqué dans BELLE-2
   gère une instance multi-communauté, 2 gros projets devraient utiliser Dirac
   contribution significative au coeur de Dirac potentiellement très intéressante
++ UB affiliation suspendu temporairement en raison de la situation économique
+ Prochain Workshop peut-être à Lyon (réponse préliminaire positive)

VMDIRAC
+ pb download input Data sur test cloud LUPM, dès que l'on augmente le nombre d'instance -> jobs stalled
+ phase de téléchargement des données input est déjà considéré comme la phase du démarrage de job, donc s'il n'y a pas de CPU consommé dans cette phase, il n'y a pas de heart bit envoyé, et donc le job devient STALLED
--> une variable d'environnement permet de bloquer le passage du job en Stalled
durant cette phase de téléchargement d'input data
+ Andrei mentione que VMDirac doit à terme gérer non seulement le lancement des VM mais aussi les ressources associées en fonction des contraintes type bande passante, RAM, scratch
--> PNNL intéressé par ce genre de workload dynamique sur VM en fonction de contraintes diverses, dont l'utilisation de la bande passante
+ d'une part il faut monitorer, d'autre part comment prendre en compte les mesures dans le scheduling
+ outil basique de monitorage de transfert d'un fichier dans DIRAC avec gfal2 ?
  --> Andrei demande à Christophe s'il y a moyen de développer une fonctionalité très simple

Singularity
+ Sorina voudrait déployer une VM avec Singularity pour lancer avec VMDirac
  --> travaille en cours avec Vanessa
  --> scripts disponibles pour nettoyer les images avant de faire les snapshots
+ 2 nouveaux sites EGI cloud supportent biomed, mais l'accès à ces sites se fait via certificat X509, mais Vanessa ne sait faire la configuration qu'avec login/motdepasse
  --> Andrei dit que c'est possible, mais qu'il faut utiliser le bon plugin
      mais pas évident de remplir les configurations (users, tenant etc...)

Publication
+ IL faut publier... le plus simple est dans le "nouveau" Journal proposé par l'IN2P3
+ JOhan propose que Luisa et Johan travaille sur l'outline d'une publication sur le TransformationSystem, comme base de discussion pour le Face2Face (la structure de la publi pourrait être similaire même si le thème est différent)

Agenda du Face2Face au LUPM
+ Singularity
+ VMDirac
+ TransformationSystem
  -> dataset et meta query, nécessité de centraliser les développements pour éviter dispersion au niveau des différents codes possibles
  -> certains regardent dataset, d'autres regardent Transformation/metafilter
  -> il faut regarder *meta-query* qui est à la base du code
  -> discussion à poursuivre aussi le 18 (Andrei reste au LUPM)
+ EGI France--Grille
+ Publications
++ TransformationSystem
++ VMDirac
++ Datasets
    

 

 

14:00 → 14:15 Etat du projet

* Next Face To Face meeting on July 17th 2017 at LUPM ** https://indico.in2p3.fr/event/14776/ * EAOM et Demande AP à l'IN2P3 (CPPM, LUPM) * ETPs à déclarer !

Orateurs: Dr Andrei Tsaregorodtsev (CPPM, Marseille), Johan Bregeon (IN2P3 LUPM)

14:15 → 14:35 Retour sur le 7th DIRAC User Workshop

https://indico.cern.ch/event/609507/timetable/#20170529

Orateur: Dr Andrei Tsaregorodtsev (Aix Marseille Univ, CNRS/IN2P3, CPPM, Marseille, France)

Slides Summary.pdf

14:35 → 14:50 VMDirac

Orateur: Mme Luisa Arrabito (LUPM)

Slides Tests(2).pdf

14:50 → 15:00 Singularity

Orateurs: Mlle Sorina POP (CNRS), Vanessa Hamar (CC - IN2P3)

15:00 → 15:20 Publication

Orateurs: Dr Andrei Tsaregorodtsev (Aix Marseille Univ, CNRS/IN2P3, CPPM, Marseille, France), Johan Bregeon (IN2P3 LUPM)

15:20 → 15:30 Réunion à Montpellier le 17 Juillet

* organisation, horaires * programme

Orateurs: Dr Andrei Tsaregorodtsev (Aix Marseille Univ, CNRS/IN2P3, CPPM, Marseille, France), Johan Bregeon (IN2P3 LUPM), Mme Luisa Arrabito (LUPM)