Compte rendu réunion Projet Dirac IN2P3 - 12 Janvier 2017 --------------------------------------------------------- + Discussions du plan de travail à partir du contenu initial du projet présenté à l'IN2P3 + Gestion des Workflow, Production System fort intérêt du LUPM, travail déjà commencé sur le Transformation System use case CTA bien défini au dernier workshop Dirac, ILC et Belle ont annoncé travailler aussi sur le sujet, alors qu'LHCb a un système dédié objectif de développer un nouveau composant générique de Dirac, utilisable par les autres communautés Andrei suggère que le LUPM devienne leader sur le développement du composant et propose au plus tôt d'organiser une première réunion avec Belle, ILC et LHCb pour planifier le travail. Possibilité d'une publication sur le fonctionnement du Transformation System, les derniers développement réalisés par Luisa, les cas d'utilisation actuels, et les développement futurs vers le Production System -> Item clairement identifié comme sujet majeur pour notre projet + Intégration de ressources : HPC Andrei souhaiterait une collaboration avec le CC Pierre aussi potentiellement intéressé Pb a résoudre : gestion OpenMP, MPI, Infiniband Manque d'un use case clair ! -> sujet non prioritaire en 2017, il faut d'abord un use case + Intégration de ressources : Cloud Projet en cours de connection des Clouds français cohabitation des tâches monocoeur et multicoeurs sur une même VM gestion du nb de jobs par VM, et du nb de VM par machine publication avancée des ressources : matching, tagging lien avec le calcul HPC intérêt clair de Sorina, Pierre potentiellement intéressé (matching, HPC) LUPM intéressé pour CTA (use case de jobs nécessitant des ressources "spéciales" 8GB RAM, 50GB scratch) + Big Data politiquement important, mais pas use case clair CC intéressé, stockage cloud (example LSST, échange "big data" entre utilisateurs via cloud) Dirac : modèle de gestion de données pour le "big data" ? stockage, description, catalogue intégration du stockage type dépôt d'objet dans Dirac ? Sorina intéressée mais encore rien de clair et concret -> Trouver un use case est indispensable afin de concretiser le projet + Dirac comme frontend aux systèmes de batch Use case proposé par le CC idée que les utilisateurs puissent gérer les jobs via Dirac plutôt que directement par le système de batch Pierre aussi intéressé pour le HPC + Interface Web Dirac Andrei mentionne qu'un unique développeur au CERN pour WebDirac actuellement ce serait bien si chaque projet incluait un travail sur l'interface Web -> particulièrement important pour frontend aux batch + COMDirac développé par Pierre, travail important à continuer devrait faire parti du projet Dirac IN2P3 potentiellement intéressant pour CTA + FG-DIRAC et DIRAC4EGI à inclure dans le projet + Résumé des projets principaux qui sont relativement bien définis aujorud'hui: 1. Workflow (Production System) 2. Cloud (CPU, publication des ressources) 3. DIRAC Batch frontend service 4. COMDIRAC 5. FG-DIRAC et DIRAC4EGI à préciser Big Data et HPC ---------------------------- + ETPs CC pourra évaluer des ETPs lorsque les projets seront mieux définis Sorina, Pierre : difficile de déclarer des ETPs, mais proposition de "valorisation" du travail réalisé (et du temps passé) à postériori + Page Wiki, Gestion de projet : Johan et Andrei discutent la meilleure solution Indico, Redmine, Gitlab ? + Proposition d'une réunion mensuelle du projet chaque 2ième jeudi du mois à 14h Update de chaque sous projet, devrait tenir en 1h Important de discuter à chaque fois les publications potentielles + Pour février, Johan propose un foodle pour organiser une réunion Face2Face au CC ou à Montpellier à priori une journée 10h-16h, rapide présentation générale groupes de travail pour discuter les points techniques