Werum

Fournir de grandes quantités de données aux utilisateurs du monde entier de manière fiable et sécurisée

Werum Software & Systems AG, dont le siège se situe à Lunebourg, en Allemagne, est l’un des plus anciens éditeurs de logiciels indépendants allemands. Werum crée des logiciels et des systèmes sophistiqués à destination d’une clientèle mondiale, qui comprend de nombreuses entreprises renommées des secteurs automobile et aérospatial, ainsi que des instituts scientifiques et des clients du secteur public. Ses activités sont axées sur le soutien des processus propres à chaque client dans les domaines de la gestion des données de mesure et de l’information, de la gestion des données d’essai pour le génie mécanique, de l’observation de la Terre, de l’administration en ligne et de la gestion des informations d’entreprise. Les solutions logicielles de l’entreprise sont basées sur des plateformes développées spécifiquement à cette fin.

Pour le compte de la Commission européenne et de l’Agence spatiale européenne (ASE), Werum a mis en place un service d’archivage à long terme pour le projet Copernicus au sein du Public Cloud d’OVHcloud. Cette solution couvre les données dites de niveau 0 ainsi que les données auxiliaires des satellites d’observation de la Terre Sentinel-1, Sentinel-2 et Sentinel-3. Depuis son lancement en octobre 2020, 220 millions d’ensembles de données totalisant plus de 9 pétaoctets ont été téléchargés dans les archives du public cloud. Depuis, ce sont environ 110 téraoctets qui sont encore ajoutés chaque mois. De plus, sa capacité actuelle permet à des utilisateurs spécifiques de télécharger pas moins de 10 téraoctets de données par jour.

Haute disponibilité, performances et évolutivité

Par le passé, les segments terrestres d’observation de la Terre étaient remis à disposition pour chaque mission. Or, une partie de ces segments terrestres relève d’archives à long terme pour lesquelles une infrastructure importante et très exigeante en termes de maintenance doit être disponible en permanence. En parallèle, les services logiciels nécessaires étaient exécutés dans des datacenters dédiés dont les performances devaient être optimisées pour la gestion des données d’une mission satellitaire spécifique. De plus, ces opérations nécessitaient une équipe spécialement formée pour résoudre les incidents critiques liés au matériel et aux logiciels.
 

La nouvelle version « archive-as-a-service » devait donc être en mesure de fournir les fonctionnalités existantes dans le cloud, et ce, de manière évolutive et portable. Les exigences d’un tel service d’archivage étaient les suivantes : une haute disponibilité de l’infrastructure, des performances élevées en termes de bande passante et de demandes de stockage, et la possibilité de faire évoluer la configuration de l’infrastructure. De plus, la grande quantité de données devait être stockée de manière à pouvoir être récupérée sans délai.

Le service d’archivage, qui est actuellement géré par Werum à l’aide de logiciels hautement spécialisés, impose des exigences spécifiques au fournisseur de cloud. Par conséquent, ce dernier doit proposer une assistance fiable 24 h/24 et 7 j/7 ainsi qu’une gamme flexible d’infrastructures techniques afin de garantir que la solution logicielle puisse être librement configurée et optimisée, étant donné qu’elle n’est pas basée sur des plateformes cloud typiques.

Pour parvenir à mettre en place l’archivage innovant en tant que service compétitif, Werum a choisi de coopérer avec OVHcloud sur ce projet.

Traiter et stocker plusieurs pétaoctets de données dans les meilleurs délais

Grâce à ses nombreuses années d’expérience dans la création et la gestion des logiciels nécessaires, Werum dispose déjà de l’expertise requise pour répondre à ces nouvelles exigences.

L’infrastructure cloud est quant à elle fournie par OVHcloud. Dans le cadre de cette infrastructure, Werum a choisi un serveur bare metal haute performance pour l’orchestration centralisée des services. Le traitement des données est évolutif et réparti sur plusieurs instances public cloud, tandis que l’archivage public cloud et le stockage d’objets public cloud sont utilisés pour le stockage de données, lui aussi évolutif. Le traitement des données comporte plusieurs étapes, comme les contrôles d’intégrité, l’extraction des métadonnées, le traçage vers des services externes spécifiques et le stockage en tant que tel. Il garantit également que les données peuvent être relues. L’équipe chargée des services de Werum a souscrit au Support Enterprise d’OVHcloud afin de pouvoir analyser et trouver rapidement des solutions ensemble en cas de problème avec l’infrastructure. Les différents services cloud de l’archivage à long terme de Copernicus contribuent à relever ces défis à plusieurs niveaux. Tout d’abord, la quantité de données à stocker est très importante. Pouvoir générer plusieurs pétaoctets de capacité de stockage dans un laps de temps très court a donc été un facteur crucial au moment de choisir un fournisseur. Grâce aux différentes options d’instance Public Cloud pour le traitement des données, il était et il est toujours possible, dans le cadre du projet, de créer et de garantir une évolutivité à court terme en termes de vitesse de traitement des données et de capacités de réseau requises.

Depuis octobre 2020, Werum gère l’archivage à long terme de Copernicus pour le compte de l’ASE. Cette solution logicielle spécialisée offre à Werum un service 24 h/24 et 7 j/7 pour fournir aux utilisateurs les données historiques d’observation de la Terre provenant des différentes missions satellites Sentinel, tout en garantissant un très haut niveau de disponibilité. La décision en faveur d’OVHcloud a déjà fait ses preuves dans la phase opérationnelle du service, précisément parce que les exigences techniques des composants logiciels nécessaires peuvent être mises en correspondance de manière flexible avec les différentes instances de serveur. De plus, Werum a pu bénéficier d’une assistance dédiée par le biais d’une bonne communication avec le Technical Account Manager. Ce dernier a permis à l’équipe de service de transmettre à OVHcloud toutes les exigences techniques à un stade précoce, par exemple, lorsque les prévisions concernant les volumes de stockage attendus évoluaient de manière significative.

Après le succès de la première phase du projet, l’opération d’archivage dans le cloud a été prolongée et continuera à fournir à la communauté des utilisateurs de l’ASE d’importants volumes de données provenant des missions satellites au-delà de 2022.

* Les opinions exprimées ici ne doivent en aucun cas être considérées comme l’opinion officielle de l’Agence spatiale européenne ou de l’Union européenne.