Journées Plateforme

Session

Datacenter

7 oct. 2016, 09:00

Amphi Recherche (Clermont-Ferrand)

9. L'UMS GRICAD : un modèle organisationnel original au service des données et du calcul

M. Christian Lenne (Université Grenoble Alpes)

07/10/2016 09:00

Le traitement des données massives pose un quadruple défi aux projets de recherche voulant exploiter le contenu de ce type de données. On peut relever : - un problème de stockage - un problème de puissance de calcul - un problème d’ingénierie logicielle pour l'utilisation d'outils existants - un problème de ressources humaines pour répondre aux 3 défis précédents. L'UMS GRICAD créée en...

13. Cas d’utilisation de Spark en Astrophysique : Cross Match de catalogues de sources

M. Andre Schaaff (Observatoire de Strasbourg - CDS)

07/10/2016 09:45

To face the increasing volume of data we will have to manage in the coming years, we test and prototype implementations in the Big Data domain (both data and processing). The CDS propose a "X-Match" service which does a cross correlation of sources between very large catalogues (10 billions rows). It is a fuzzy join between two tables of several hundred millions of lines (e.g. 470,992,970...