Partager via

Services OSDU® M23 disponibles sur Azure Data Manager for Energy

  • Article

Azure Data Manager for Energy est actuellement conforme à la version jalon M23 d’OSDU®. Vous trouverez ci-dessous une vue d’ensemble des services OSDU® actuellement disponibles sur Azure Data Manager for Energy. Cette page sera régulièrement mise à jour au fur et à mesure de l’évolution des versions et de la disponibilité des services.

Services de base et d’assistance

  • Catalogue CRS : fournit des points de terminaison d’API pour travailler avec des données de référence géodésiques, permettant aux développeurs de récupérer des définitions CRS, de sélectionner les CRS appropriés pour l’ingestion de données et de rechercher des CRS en fonction de diverses contraintes.
  • Conversion CRS : active la conversion des coordonnées d’un système de référence de coordonnées (CRS) vers un autre.
  • Jeu de données : fournit des points de terminaison d’API internes et externes pour permettre à une application ou à un utilisateur de récupérer des instructions de stockage/récupération pour différents types d’ensembles de données.
  • Droits : utilisé pour activer l’autorisation dans l’écosystème de données OSDU. Le service permet la création de groupes. Un nom de groupe définit une autorisation. Les utilisateurs ajoutés à ce groupe obtiennent cette autorisation. La principale motivation du service de droits est l’autorisation des données, mais la fonctionnalité permet trois cas d’usage : les groupes de données utilisés pour l’autorisation de données, les groupes de services utilisés pour l’autorisation de service, les groupes d’utilisateurs utilisés pour le regroupement hiérarchique des identités d’utilisateur et de service.
  • Fichier : fournit des points de terminaison d’API internes et externes pour permettre à l’application ou à l’utilisateur d’extraire les enregistrements du système ou de demander des données d’emplacement de fichier.
  • Indexeur : fournit un mécanisme permettant d’indexer des documents qui contiennent des données structurées ou non structurées. Les documents et les index sont enregistrés dans un magasin persistant distinct optimisé pour les opérations de recherche. L’API d’indexeur peut indexer n’importe quel nombre de documents.
  • File d’attente de l’indexeur : fournit un ensemble d’API qui aident à transférer les messages vers et depuis le service de stockage vers le service d’indexeur.
  • Légal : gestion des LegalTags associés aux jeux de données. Un LegalTag est l’entité qui représente l’état juridique des données dans l’écosystème de données. Il s’agit d’une collection de propriétés qui régit la façon dont les données peuvent être consommées et ingérées.
  • Notification : permet aux consommateurs intéressés de s’abonner aux modifications de données et de métadonnées à l’aide d’un modèle de publication/d’abonné.
  • Kit de développement logiciel (SDK) Python : offre aux développeurs des outils et des bibliothèques pour interagir avec les services OSDU à l’aide de Python.
  • Registre : autoriser une application à inscrire une action (la fonction à déclencher). Il attend que les données (contexte) proviennent de l’OSDU pour activer l’action, et l’application peut inscrire un filtre (activer/désactiver) pour dire quelles données peuvent être utilisées avec cette action.
  • Schéma : permet une gouvernance centralisée et la gestion du schéma dans l’écosystème de données. Il offre une implémentation de la norme de schéma. Le service de schéma fournit toutes les API nécessaires pour extraire, créer, mettre à jour et marquer un schéma obsolète.
  • Recherche : fournit un mécanisme permettant de rechercher des index. Prend en charge la recherche en texte intégral sur les champs de chaîne, les requêtes de plage sur les champs de dates, numériques ou de chaîne, etc. ainsi que les recherches géo-spatiales.
  • Secret (préversion) : facilite le stockage et la récupération de différents types de secrets dans un ou plusieurs référentiels spécifiés afin que les secrets puissent être sécurisés, séparés des secrets dans le référentiel d’infrastructure et gérés facilement en interfaçant les applications.
  • Métadonnées de fichier sismique : gère les métadonnées associées aux données sismiques. Cela annote les dimensions, les canaux de valeur et les paires clé/valeur génériques.
  • Stockage : fournit un ensemble d’API pour gérer l’ensemble du cycle de vie des métadonnées, comme l’ingestion (persistance), la modification, la suppression, le contrôle de version et le schéma de données.
  • Unité : fournit des définitions de dimension/mesure et d’unité.

Services de gestion des données du domaine (DDMS)

  • DDMS sismique : permet un accès sécurisé et une gestion efficace des jeux de données sismiques.
  • Wellbore DDMS : permet l’accès sécurisé et la gestion des données relatives au puits de forage.
  • Well Delivery DDMS : permet l’accès sécurisé, le stockage et l’interaction des données Well Delivery (planification et exécution).

Service d’ingestion

  • EDS DMS [Préversion] : extrait des données spécifiées (métadonnées) à partir de sources de données conformes à OSDU via des travaux planifiés tout en laissant les fichiers de jeu de données associés (LAS, SEG-Y, etc.) stockés à la source externe pour une récupération à la demande.
    • DAG de récupération (fetch) et d’ingestion EDS : facilite l’extraction de données à partir de fournisseurs externes et l’ingestion dans la plateforme OSDU. Cela implique des étapes telles que l’inscription auprès des fournisseurs, la création de travaux de données et le déclenchement de l’ingestion. Avec la version M23, le DAG de récupération (fetch) et d’ingestion EDS inclut de nouvelles fonctionnalités, telles que le mappage de données parent et de données de référence.
    • DAG de planificateur EDS : automatise l’extraction des données en fonction des planifications prédéfinies et envoie des e-mails aux destinataires en fonction des besoins. Cela garantit que les données restent à jour sans intervention manuelle
  • Workflow d’ingestion : lance des processus métier au sein du système. Pendant la phase de prototype, cela facilite les opérations CRUD sur les métadonnées de workflow et déclenche des workflows dans Apache Airflow. En outre, le service gère les enregistrements de démarrage de processus, agissant en tant que wrapper autour des fonctions Airflow.
  • DAG d’ingestion de manifeste : utilisé pour ingérer un ou plusieurs artefacts de métadonnées sur des jeux de données dans l’instance Azure Data Manager for Energy. Découvrez-en plus sur l’ingestion basée sur un manifeste.
  • DAG d’analyseur CSV : permet d’analyser les fichiers CSV dans un format pour l’ingestion et le traitement.
  • osdu-airflow-lib : bibliothèque qui permet l’ingestion du contexte utilisateur dans les workflows Airflow.
  • osdu-ingestion-lib : bibliothèque qui prend en charge l’ingestion du contexte utilisateur et inclut différents correctifs liés au remplacement de contrôle de version et d’autorité Python.
  • DAG SegY-to-oVDS : convertit les formats de fichier SegY en oVDS.
  • DAG SegY-to-oZGY : convertit les formats de fichier SrgY en ZGY.

Services OSDU® indisponibles sur Azure Data Manager for Energy

Remarque : les services OSDU® suivants ne sont actuellement indisponibles sur Azure Data Manager for Energy.

  • Réservoir DDMS
  • DAG de naturalisation EDS
  • DAG d’ingestion de manifeste par référence
  • API Seismic DDMS v4
  • DDMS d’échantillons de roches et de fluides
  • DDMS de production – Historien
  • DAG d’analyseur WITSML
  • DAG d’analyseur d’énergie (WITSML Parser v2, Resqml Parser, ProdML Parser)
  • Zone de consommation géospatiale
  • Partition Remarque : les opérations peuvent toujours être effectuées à l’aide des API de partition de données disponibles ou via le Portail Azure.
  • Service de stratégie
  • Mise à niveau du schéma
  • Worker des services de domaine Wellbore