Etat des projets Grille Room: 322 - EGEE (Hélène) - EGI-Inspire - IdG (Rolf, Virginie, Yonny) - LCG (Pierre) - Grille régionale (Yonny) et projets en préparation, le cas échéant.

Préparations transition ROC Fr --> NGI Fr

• Rolf

Room: 322 - Cahier de charges site web (Virginie) - Plan d'organisation des Opérations (Rolf)

Nouvelles des coopérations Room: 322 - Prague - CS / CILOE - EELA

Formation et dissémination

• Virginie, tous

Room: 322 Formations et actions de dissémination passées, en cours, à prévoir.

Affaires administratives Room: 322 - Missions et absences dans la semaine à venir - Fin d'année: ROD, grid-roc, rapports ROC et site - Conférences / workshops annoncés

Incidents et problèmes des VOs (CC, sites français, autres sites)

• Tous

Room: 322 Sujets Exploitation+Stockage: ---------------------------------- - 07/12 : incident ACSL : trop de processus service redémarré. ACSLS a été indisponible entre 13H30 et 15H, donc pas de montages de bandes pdt cette prériode. Vers 15h il a été redémarré et les ressources HPSS ont été drainées entre 14H et 15H30. - 07/12/ : Echec de la connection CC-CINES : sortie du rack montpellier_0 - 07/12 : Suzanne reléve un pbm : un user biomed 32 reste bloqué alors qu'il aurait du être débloqué. -> Pbm de synchro dans SAPHIR corrigé par JD le lendemain 08/12 : des wns rebootent subitement suite à un kernel panic. Klaus werner est en discussion avec YP sur le sujet. - 09/12 : quelques workers sortis de prod pour des anomalies ccautofs - Toutes les machines de montpelliers sont UP : celles transférées et celle arrêtées Lundi soir. - 11/12 : Arrêt xrootD : mardi 15. Drainer Des déplacements de racks logeant des servers thumpers pour XROOTD vont avoir lieu le 15/12 matin (vers 9h normalement). Cela implique une interruption nette du service à 9h. Toutes les expérience sont impactées sauf ATLAS. Les ressources (u_xrootd et u_bb_root) seront drainées la veille à minuit afin d'éviter que des jobs restent en machine et dmdent xrootd pendant l'intervention et éviter qu'ils ne rentrent en machine pdt l'intervention. - 08/12 : incident lbnamed. SIR envoyé. Indisponibilité des services entre 13h - 14h30 [liste dans le wiki] https://cctools.in2p3.fr/operations/wiki/doku.php?id=incidents:incidentreseau0812009 - 11/12 : [info CC] Arret de service le 22/12/2009 _*Voir si il faut mettre un DT dans la GOC DB pour SRM *_ - HPSS : RAS. Cde de bande en cours. Sujets Support: ------------------- _LHCb_ : 1) Encore un problème de data access via gsidcap pour des jobs utilisateurs : Voir le GGUS ticket pour plus des détails : https://gus.fzk.de/ws/ticket_info.php?ticket=54090 2) Some jobs fail because of Disk quota exceeded (not real data reconstruction jobs). This is due to the download of input files -> Max scratch of T class increased to 20 GB. 3) CPU publication fixed -> almost no more jobs killed for CPU exceeded. _CMS_ : Transfer ****** - The import and the export of the real data had more often an issue with the FTS timeout. This is happened because of the files size in same cases reaches 4 time the nominal one. Since the startup of the LHC all the real data imported to FNAL, they have evenly routed to CC. The data are split among files of size much more that the nominal one (10GB). This impact the quality and rate of the transfer due to the timeout limitation - The timeout of the dedicated T1 links managed by out FTS was increase to fix temporary this issues, a details analysis will be done to understand all the parametres that can be ajusted to fix this issue. The expectation also rely on the FTS2.2 to solve the issue, since it can with new feature, in particular better handle of the timeout.. - The have increased as well the timeout of the IN2P3-->STAR and STAR-->IN2P3. - Some issues with dcache have impacted the transfer too, they have been identified and fixed. Disk deployment ************* - The disk deployment of 2009 has been discussed and concluded with dcache masthers. Reprocessing ********** - CMS wants to keep the real data on disk during one year for fast reprocessing. This has been discussed with dcache expert, and the Lionel proposition was adapted for this needs. _Atlas_ : - periode de prise de donnees : tres bonne stabilite du CC et tres bonne efficacite (transferts et jobs) - 14 fichiers perdus dans dcache entre le 1 novembre et le 1 decembre (mecanisme compris et patche) - cclcgatlas04 /var plein (logs ascii des jobs ATLAS) -> ca plante la soumission des jobs ATLAS Pierre Girard a bascule /var/www vers /vo/atlas/www (il faudra basculer aussi httpd, sinon logs invisibles) aussi, ATLAS est en train de voir si zip des logs est possible - Problèmes dans les transferts: * lenteur de certains transferts observes (BNL). On ne comprend pas l'origine du problème malgré un travail en collaboration avec les experts de BNL. On a vérifié que les performances du reseau (IPERF) n'étaient pas en cause. On constate qu'il y a beaucoup de transferts de petits fichiers, ce qui est pénalisant. * On observe des transferts en timeout. Certains des transferts venaient de/ allaient vers ccdcatsn110 qui a été arrétée. Cela n'a pas résolu le problème. Entre temps, elle a été reconfigurée et installée. Un poste actuellement explorée est la dégradation des performances gridftp dans dcache 1.9.5. - Augmentation de la reactivite du CC aux jobs d'analys: on a testé la réactivité de la ferme en reservant un point d'execution par worker aux jobs de class G. Une amélioration nette a été observée. - reprocessing prevu pendant les vacances de fin d'annee (prevision : debut 22 decembre - fin a janvier); les data seront pris de disk. -Installation des releases Athena: on prévoit d'installer les releases automatiquement sur 1 CE par site (T1, T2) et de créer un script qui tourne régulièrement pour mettre à jour et synchroniser les tags des 2 CES d'un même site. QUESTIONS: - arret HPSS du 22 decembre - impact sur ATLAS ? Problèmes récurrents: ------------------------- AT Grille généralement: ---------------------------- - CE, BDII, VOMS... - SE, FTS, LFC, SRM, dCache

Charge et événements prévisibles pour la semaine à venir

• Tous

Room: 322 Demandes de production, annonces de transfert, data challenges, arrêts, installations, ... Tout cela uniquement s'il y a un intérêt général. Aussi: des nouvelles des projets Grille, encore uniquement s'il y a un intérêt général. - RAPPEL: chaque intervention même à priori anodine qui pourrait avoir un impact sur la production nécessite un accord du comité de direction à partir du 4/12/2009

Nouvelles des équipes du CC

• Un membre de chaque équipe

Room: 322 Sujets par équipe, avec un impact potentiel sur l'exploitation. Nouvelles des embauches

Divers Room: 322