Поделиться через

Службы OSDU® M23, доступные в Azure Data Manager для энергетики

  • Статья

Azure Data Manager для энергетики в настоящее время соответствует выпуску Вехи OSDU® M23. Ниже приведен обзор служб OSDU®, доступных в Azure Data Manager для энергетики. Эта страница будет регулярно обновляться по мере развития версий служб и доступности.

Основные и вспомогательные службы

  • Каталог CRS: предоставляет конечные точки API для работы с геотекстическими эталонными данными, позволяя разработчикам получать определения CRS, выбирать соответствующие CRS для приема данных и искать CRS на основе различных ограничений.
  • Преобразование CRS: включает преобразование координат из одной эталонной системы координат (CRS) в другую.
  • Набор данных. Предоставляет внутренние и внешние конечные точки API, позволяющие и приложению или пользователю получать инструкции по хранилищу и извлечению различных типов наборов данных.
  • Права: используется для включения авторизации в экосистеме данных OSDU. Служба позволяет создавать группы. Имя группы определяет разрешение. Пользователи, добавленные в группу, получают это разрешение. Основной мотивацией службы прав является авторизация данных, но функциональность включает три варианта использования: группы данных, используемые для авторизации данных, группы служб, используемые для авторизации службы, группы пользователей, используемые для иерархической группировки удостоверений пользователей и служб.
  • Файл. Предоставляет внутренние и внешние конечные точки API, чтобы позволить приложению или пользователю получить все записи из данных о расположении файлов системы или запроса.
  • Индексатор: предоставляет механизм индексирования документов, содержащих структурированные или неструктурированные данные. Документы и индексы сохраняются в отдельном постоянном хранилище, оптимизированном для операций поиска. API индексатора может индексировать любое количество документов.
  • Очередь индексатора: предоставляет набор API, которые помогают переадресовать сообщения в службу хранилища и из службы хранилища в службу индексатора.
  • Юридический: управление юридическими тегами, связанными с наборами данных. LegalTag — это сущность, представляющая юридический статус данных в экосистеме данных. Это коллекция свойств, которые управляют способом использования и приема данных.
  • Уведомление. Позволяет заинтересованным потребителям подписываться на изменения данных и метаданных с помощью шаблона публикации или подписчика.
  • Пакет SDK для Python: предлагает средства и библиотеки для разработчиков для взаимодействия со службами OSDU с помощью Python.
  • Регистрация. Разрешить приложению зарегистрировать действие (активируемая функция). Он ожидает, что данные (контекст) будут поступать из OSDU, чтобы включить действие, и приложение может зарегистрировать фильтр (включить или отключить), чтобы сказать, какие данные можно использовать с этим действием.
  • Схема. Включает централизованное управление схемой в экосистеме данных и управление ими. Он предлагает реализацию стандарта схемы. Служба схем предоставляет все необходимые API для получения, создания, обновления и маркировки устаревшей схемы.
  • Поиск. Предоставляет механизм поиска индексов. Поддерживает полнотекстовый поиск по строковым полям, запросам диапазона по датам, числовым или строковым полям и т. д., а также геопространствному поиску.
  • Секрет (предварительная версия): упрощает хранение и получение различных типов секретов в указанном репозитории( ies), чтобы секреты могли быть защищены, отделены от секретов в репозитории инфраструктуры и управляться с помощью взаимодействия приложений.
  • Метаданные сейсмического файла: управляет метаданными, связанными с сейсмическими данными. Он анимирует измерения, каналы значений и пары универсальных ключей и значений.
  • Хранилище. Предоставляет набор API для управления всем жизненным циклом метаданных, таким как прием (сохраняемость), изменение, удаление, управление версиями и схема данных.
  • Единица: предоставляет определения измерений и измерений и единиц.

Службы управления данными домена (DDMS)

  • Сейсмическая DDMS: обеспечивает безопасный доступ и эффективную обработку сейсмических наборов данных.
  • Wellbore DDMS: обеспечивает безопасный доступ и обработку данных, связанных с благополучием.
  • Хорошо доставка DDMS: обеспечивает безопасный доступ, хранение и взаимодействие данных о хорошой доставке (планировании и выполнении).

Службы приема

  • EDS DMS [предварительная версия]: извлекает указанные данные (метаданные) из источников данных, совместимых с OSDU, с помощью запланированных заданий при выходе из связанных файлов набора данных (LAS, SEG-Y и т. д.), хранящихся во внешнем источнике для извлечения по требованию.
    • EDS Fetch & Ingest DAG: упрощает получение данных от внешних поставщиков и прием их в платформу OSDU. Он включает шаги, такие как регистрация с помощью поставщиков, создание заданий данных и активация приема. С выпуском M23 EDS Fetch and Ingest DAG включает новые функции, такие как сопоставление родительских и ссылочных данных.
    • EDS Scheduler DAG: автоматизирует получение данных на основе предопределенных расписаний и отправляет сообщения электронной почты получателям по мере необходимости. Это гарантирует, что данные остаются текущими без вмешательства вручную
  • Рабочий процесс приема: инициирует бизнес-процессы в системе. На этапе прототипа он упрощает операции CRUD с метаданными рабочего процесса и активирует рабочие процессы в Apache Airflow. Кроме того, служба управляет записями запуска процесса, выступая в качестве оболочки для функций Airflow.
  • DaG приема манифеста: используется для приема одного или нескольких артефактов метаданных о наборах данных в экземпляре Azure Data Manager для энергетики. Дополнительные сведения о приеме на основе манифеста.
  • DAG синтаксического анализа CSV: помогает анализировать CSV-файлы в формате приема и обработки.
  • osdu-airflow-lib: библиотека, которая обеспечивает прием контекста пользователя в рабочих процессах Airflow.
  • osdu-ingestion-lib: библиотека, которая поддерживает прием контекста пользователя и включает различные исправления, связанные с управлением версиями Python и заменой центра.
  • SegY-to-oVDS DAG: преобразует форматы файлов SegY в oVDS.
  • SegY to-oZGY DAGY: преобразует форматы файлов SrgY в ZGY.

Службы OSDU® недоступны в Azure Data Manager для энергетики

Примечание. В настоящее время в Azure Data Manager для энергетики недоступны следующие службы OSDU®.

  • DDMS водохранилища
  • EDS Naturalization DAG
  • Прием манифеста по ссылке DAG
  • ИНТЕРФЕЙСы API -интерфейсы DDMS для сейсмических DDMS версии 4
  • Образец DDMS для породы и жидкости
  • Производственные DDMS - историк
  • DAG синтаксического анализа WITSML
  • Energistcs Parser DAG (WITSML Parser v2, Resqml Parser, ProdML Parser)
  • Зона геопространственного потребления
  • Примечание к разделу. Операции по-прежнему можно выполнять с помощью доступных API секционирования данных или с помощью портал Azure.
  • Служба политик
  • Обновление схемы
  • Рабочая роль доменных служб Wellbore