DIRAC Project meeting

→ Europe/Paris
Vanessa Hamar (CC-IN2P3 / CNRS)
Description

Vanessa HAMAR GONZALEZ is inviting you to a scheduled Zoom meeting.

Topic: DIRAC@IN2P3
Time: Aug 1, 2023 02:00 PM Paris

Join Zoom Meeting
https://cnrs.zoom.us/j/97111785369?pwd=MzFxYm9CMlovRk9mRG5PWnRudmtvQT09

Meeting ID: 971 1178 5369
Passcode: 87daL7

 

Meeting minutes: https://etherpad.in2p3.fr/p/DIRAC%40IN2P3-01082023

---

One tap mobile
+33170379729,,97111785369#,,,,*476353# France
+33170950103,,97111785369#,,,,*476353# France

---

Dial by your location
• +33 1 7037 9729 France
• +33 1 7095 0103 France
• +33 1 7095 0350 France
• +33 1 8699 5831 France
• +33 1 7037 2246 France
 

Meeting ID: 971 1178 5369
Passcode: 476353

Find your local number: https://cnrs.zoom.us/u/ahyfbhKlA

---

Join by SIP
• 97111785369@zoomcrc.com

---

Join by H.323
• 162.255.37.11 (US West)
• 162.255.36.11 (US East)
• 213.19.144.110 (Amsterdam Netherlands)
• 213.244.140.110 (Germany)

Meeting ID: 971 1178 5369
Passcode: 476353

 

Participants
  • Andrei Tsaregorodtsev
  • Gino Marchetti
  • Jerome Pansanel
  • Johan Bregeon
  • Luisa Arrabito
  • Sorina POP
  • Vanessa Hamar
  • Yannick Patois
Cacher

Compte rendu réunion DIRAC@IN2P3

Mardi 1 août 2023

 

Présents : 

Andrei, Alice, Luisa, Natthan

 

Secrétaire : 

Vanessa

 

Ordre du Jour :

  1. État du Projet
  2. DIRAC X Discussion
  3. Projets
  4. Publications / Conférences
  5. Consortium news
  6. AOB

1. État du Projet

1.1 Versions :

       2 patchs releases :

  • v7r3p38 - "last" patch :
    • Job state machine updates 
  • 8.0.25 :
  • Prerelease  8.1.0a15
    • Le prochain hackathon certification le 3 août

1.2 Développements :

  • OIDC/OAuth2
    • NTR
  • Pilot
  • Transformation 
    • Améliorer le support pour opérations bulk (A regarder : Andrei et Luisa)
  • Fluent-Bit
    • Documentation ? (A demander à Bertrand)
  • CTA
    • Le développement d'un agent a été commencé. Cet agent aura pour objectif de gérer les basculements (failovers) des transformations. L'idée est que l'agent soit capable de prendre des décisions en fonction des informations issues des jobs des transformations ayant rencontré des problèmes, et d'exécuter des actions en conséquence. Un autre avantage sera la corrélation avec les données d'Elasticsearch.
      • Exemples des uses cases :  - les fichiers ne sont pas téléchargés (trouvés), des jobs « failed ».
      • Un possible sujet de discussion en DIRAC pour partager des idées et concrétiser les besoins.

1.3. Services EGI :

  • Operations normales, ~8M jobs exécutés
  • Production "complex" le dernier mois
  • ES Monitoring à réparer

 

  • Gestion de VO avec les token (biomed, km3net.org)
  • Support aux VO's: 
    • km3net.org: validation des sites
    • complex: support utilisateurs
    • usegalaxy.eu : développement des outils de soumission des pilotes

1.4. Européen/Nationaux Projets : 

  • GreenDIGIT approuvé. Optimisations d'utilisation des ressources pour diminuer l'impacte environmental.

            Le projet est passé au stage "Grant Agreement preparation". 

L'implication du CNRS :

                         CPPM + IPHC. 

                         CPPM : embauche d'un ingénieur, 18 PMs

  • PEPR STEEL approuvé. La réunion kick-off le 7 septembre. Data-aware job scheduling

L'implication du CNRS:

CPPM + IPHC

CPPM :   embauche d'un ingénieur, 18 PMs   

 

2. DIRACX

 

  • Le prochain DiracX hackathon au CERN le 4-5 septembre. Enregistrement est ouvert.
    • Attendants:  Andrei,  ... ??

 

3. Projets

3.1 CTA

  • CWL Travail en cours pour récupérer les lignes de commande en CWL

3.2 Biomed

  • RAS

3.3. Juno  

  • Mis à jour de l'installation (8.0.24)
  • Setup soumission pilotes avec tokens (CNAF, Lyon, JINR, IHEP)
  • Serveur IAM-Juno est en place
  • Le support pour les operation bulk avancées dans le systeme de Transformations est nécessaires

 

  • La discussion autours du service DIRAC multi-VO est en cours. 

3.4 BESIII

  • Installation dediée à Torino pour BESIII est en cours. 

 

4. Conference, workshop, publications

  • ISGC’23 paper envoyé => DIRAC: OIDC/OAuth2 based security framework => En attendant les reviewers.
  • CHEP 
    • L'écriture du paper a été entamée.
  • Joint DIRAC + Rucio Workshop (KEK) 16-20 Octobre 2023  https://indico.cern.ch/event/1252369/

L’enregistrement est en cours !

5. Consortium

  • L’extension est déjà signée pour le CNRS, l’Imperial College, le CERN et l'IHEP. Après la signature par KEK ce sera accompli.

6. AOB

Prochaine réunion le jeudi 14 septembre 2023 à 14h.

Il y a un compte-rendu associé à cet événement. Les afficher.