DIRAC Project meeting

mardi 22 nov. 2022, 11:00 → 13:00 Europe/Paris

Visio Zoom

Johan Bregeon (IN2P3 LSPC)

https://univ-grenoble-alpes-fr.zoom.us/j/96647805540?pwd=ZUN5bVZlb1ZWb0drM0J4a1FzTjE3QT09

 

Meeting ID: 966 4780 5540

Passcode: 658936

----------------------
Bienvenu à Nathan pigoux
Physicien de formation
A passé 2 ans au service support au CC-IN2P3
Maintenant à Montpellier sur CTADIRAC
plan de travail sur la robustesse des workflow notamment (failover, etc...)
va participer à l'hackathon K8S, en contact avec Chris au CERN

----------------------
Nouvelles de DIRAC - Andrei
Developpement
 v7r2p53 patché pour utiliser ARC via interface REST "AREX"
   -> remplacera à terme toutes les interfaces ARC
 v7r3p33
 v8.0.3
 v8.1.0a4 compiled -> 3 hackathon
 v8.1.0 features
   moving all services to https (y compris SE ?)
   remove setup concept and related code
   support for non-DIRAC clients (REST, HTTPs)
   deprecate dirac-proxy-init -> dirac-login
   VMDIRAC -> CloudComputingElement : Andrei fait un premier test réel dans instance EGI
 OAuth/OIDC AuthN/AuthZ
   meeting check-in developers this afternoon to fix final issues
 ARC/HTCondorCE/Cloud with token
   Tested with HTCondorCE and WLCG dev tokens
   To be done with EGI check-in, ARC and cloud submission
   -> draft PR, but AREX still missing
 COMDIRC : PR to include it into DIRAC

EGI/FG services
 13M jobs since 2022, up to 15k concurent jobs (large Auger production - Tchèques)
   -> quelques mails NAGIOS pour cause de charge due aux JobStatusAgent, mais ça passe, à surveiller
 Servers : ccdirac96 at 8.0.0 with TokenManager and AuthServer
   -> plan to full migration to 8.0.x, ne devrait pas poser de problème car déjà v7 python 3
 Discussion avec la VO Complex qui voudrait utiliser le Cloud du LAL
   -> Andrei a installé le premier CloudComputingElement... login/password maintenant puis token (EGI)
 Starting integration of the Galaxy VO
   -> setup en cours
   -> discussion with the Biomed VO (Sorina) to use their resources for testing

EGI
 Réunion ce matin avec Tiziana, discussions juristes, procurement sur les services, pas de développement
 Réunion cet aprem avec DAS Calcul

ESCAPE
 Concordia : migration python3 EscapeDIRAC still to be done
 Recognizing DIRAC as the base workload manage for ESCAPE - Johan, TBD

EAP 21 Octobre
 l'entretient s'est bien passé, pas de commentaire particulier

Réunion projet IN2P3 le 29 novembre
 Calcul et données à 12h15 (Sabine)

Workshop DIRAC
 Dirac community workshop at EGI Conference in May/June 2023 : to be organized

Joint DIRAC+Rucio Workshop 16-20 Octobre 2023 au KEK
 première édition, différente du DUW habituel
 bien travailler sur l'organisation

----------------------
Conferences
CHEP 2023
 + General DIRAC dev overview (Federico)
 + CTA Production (Alice)
ISGC abstract
 + DIRAC OIDC/OAuth2 (Andrei)

----------------------    
Publication
 Paper on Workflow to be written

----------------------
Prochaine réunion le 14 décembre à 11h
Face-to-Face entre le 6 - 16 Mars 2023 à Montpellier
 

1 Etat du projet

• Update Dirac v7 et v8
• EGI, ESCAPE, EOSC
• Tour de table

Orateurs: Dr Andrei Tsaregorodtsev (Aix Marseille Univ, CNRS/IN2P3, CPPM, Marseille, France), Johan Bregeon (IN2P3 LSPC)

DIRAC_EAP_2023_v0.1.2.pdf

DIRAC@IN2P3_22112022.pdf

2 Containers

• use cases
• issues
• singularity vs udocker
• solutions

Orateurs: Andrei Tsaregorodtsev (Aix Marseille Univ, CNRS/IN2P3, CPPM, Marseille, France), Dr Johan Bregeon (IN2P3 LSPC), Luisa Arrabito (LUPM), Sorina POP (CNRS)

3 Update CTA

Orateur: Luisa Arrabito (LUPM)

4 Publications / Conférences

Publications

• Transformation System
• Meta Query

Conferences

• EGI !
• CHEP 2023, 8-12 Mai à Norfolk, Virginia, USA (Abstract submission closes 17 November 2022)
• ISGC 2023, 19 ~24 March 2023, Academia Sinica, Taipei, Taiwan, Abstract 31 October 2022

Orateurs: Dr Andrei Tsaregorodtsev (Aix Marseille Univ, CNRS/IN2P3, CPPM, Marseille, France), Johan Bregeon (IN2P3 LSPC)