DIRAC Project meeting

vendredi 11 sept. 2020, 14:00 → 16:05 Europe/Paris

Visio Zoom

Johan Bregeon (IN2P3 LUPM)

La connexion zoom:

https://us02web.zoom.us/j/87503985047

Prochaine Réunion Vendredi 9 Octobre à 14h
-------------------------------

Update Dirac - Andrei
+ latest patch v7r1p11 et DIRACOS v1r13
+ many instances to be migrated from v6r22 or v7r0 to v7r1
+ next release v7r2 -> pre-release 13
  OAuth2/OIDC -> wip
  Tornado (http) -> almost ready

On-going development
+ Production System
+ VMDirac pilot3
+ OAuth/OIDC AuthN§AuthZ - Andrii
+ DIRAC within Jupyter notebookds - Adil
+ Exploring GO
  direct interaction channel with running application, depends upon Tornado

FG Dirac
+ running v7r0, need to plan v7r1
+ looking at setting up ELK stack
+ looking at setting up multi-core queues

INFRAEOSC
+ CNRS: CC + CPPM = 44 PM
+ Merge FG and EGI services
+ Maintenance and support of DIRAC services

EGI Conference November 2-4th -> on-line
Virtual DIRAC workshop to be decided
ISGC 26 octobre
ADASS 30 septembre
JCAD 15 septembre

Andrii update on OAuth
+ now Dirac is certificate DISET based
+ need to change to the authentication flow
+ in parallel http protocole used to replace DISET
+ problem of testing instance with check-in team
-> use tokens instead of certificates within Dirac

Adhil - Jupyter notebook
+ Intégrere Jupyter notebook dans Dirac
  possibilité de lancer un notebook par protocole http
  machine accessible mise à disposition par la VO
+ intégrer Dirac Jupyter notebook pour EGI
  pour lancer les jobs
+ nécessite utilisation token EGI check-in
+ Fabio indique de regarder DASK

CTADIRAC Production
+ Test PS en production -> bien passé
+ Problèmes de scalabilité au-dessus de 4000 jobs concurrents
  peut-être lié au TS, utilisation des filtres
+ TS indisponible, connexion impossible
  -> à reproduire via un test
 
ELK Stack - Andrei, Patrick
+ stack mis en place au CC en version beta avant l'été
+ service monitoring Dirac, central loggin en particulier
+ DIRAC a un composant d'interface à ElasticSearch
+ Patrick a interragi avec Fabien pour mettre en place les certificats de connexion
  au service, en attente... relancer Fabien lundi
+ Patrick a regardé le code Dirac d'interface à ELK, a priori devrait fonctionné
  avec peut-être des ajustements minimum

 

14:00 → 14:15 Etat du projet

• Update Dirac v7
• Tour de table
• Réunion Face à Face - automne ?

Orateurs: Dr Andrei Tsaregorodtsev (CPPM, Marseille), Johan Bregeon (IN2P3 LUPM)

DIRAC@IN2P3_11092020.pdf

14:15 → 14:30 Update CTA Dirac

Orateur: Luisa Arrabito (LUPM)

14:30 → 14:45 Monitoring & Elastic Search

14:45 → 15:00 Publications / Conférences

Publications

• Transformation System
• Meta Query

Conferences

• ISGC 2020 -> 21 - 26 March, 2021
• ACAT 2020 : 8-12 septembre 2020 --> moved to 2021
• https://adass2020.es/ 8-12 novembre 2020

Orateurs: Dr Andrei Tsaregorodtsev (Aix Marseille Univ, CNRS/IN2P3, CPPM, Marseille, France), Johan Bregeon (IN2P3 LUPM), Pierre Gay (Université de Bordeaux)