L’avènement des futurs supercalculateurs Exascale soulève de multiples défis liés aux données.

Pour permettre aux applications d’exploiter pleinement les infrastructures à venir, un défi majeur concerne l’extensibilité des techniques utilisées pour le stockage, le transfert, le traitement et l’analyse des données.
D’autres défis majeurs découlent de la nécessité d’exploiter de manière adéquate les technologies émergentes en matière de stockage et de traitement, ce qui conduit à des hiérarchies de stockage nouvelles et plus complexes.

Enfin, il devient désormais nécessaire de prendre en charge des flux de travail hybrides de plus en plus complexes impliquant à la fois la simulation, l’analyse et l’apprentissage, fonctionnant à des échelles extrêmes sur des supercalculateurs interconnectés à des nuages et à des systèmes en périphérie.

Le projet Exa-DoST abordera la plupart de ces défis, organisés en 3 domaines :

1. Stockage et E/S évolutifs ;
2. Traitement in situ évolutif ;
3. Analyse intelligente et évolutive.

Nombre de ces défis ont déjà été identifiés, par exemple par le projet Exascale Computing aux États-Unis ou par de nombreux projets de recherche en Europe et en France.

Dans le cadre du programme NumPEx, Exa-DoST vise un niveau de préparation technologique beaucoup plus élevé que les projets nationaux précédents concernant la pile logicielle HPC.
Il abordera les principaux défis en matière de données en proposant des solutions opérationnelles co-conçues et validées dans des applications françaises et européennes.
Cela permettra de combler le vide laissé par les projets internationaux précédents afin de garantir que les besoins français et européens soient pris en compte dans les feuilles de route pour la construction de la pile logicielle Exascale axée sur les données.