Поделиться через


Платформа данных

Рынки данных имеют сильную связь с метаданными. Платформа данных предлагает потребителям данных интуитивно понятный, безопасный, централизованный и стандартный интерфейс для покупок данных. Он приближает данные к аналитикам и специалистам по данным, используя базовые метаданные. Он также отслеживает все продукты данных, которые часто хранятся в нескольких доменах данных.

Чтобы демократизировать данные с помощью архитектуры сетки данных, сосредоточьтесь на нескольких важных областях:

  • Платформа взаимодействия с продуктами данных: Позволяет поставщикам и потребителям данных совместно решать, какие данные можно сделать доступными. Интерфейсы должны предоставлять широкие возможности поиска, позволяющие пользователям искать ключевые слова, бизнес-термины и естественный язык. Совместная работа в области демократизации данных часто связана с каталогами данных или полностью управляемыми службами управления метаданными, которые позволяют выполнять поиск и обнаружение метаданных. Microsoft Purview — это проверенный подход к созданию портала совместной работы в режиме самообслуживания. Он поддерживает обнаружение данных , включая глоссариии классификации . Обнаружение данных позволяет потребителям данных легко находить данные. Microsoft Purview также поддерживает политики доступа владельцев данных , чтобы вы могли предоставить возможность самостоятельного доступа к данным.

  • Уровень инфраструктуры данных: Помогает автоматизировать развертывание и настройку шаблонов потребления, которые являются общими и многократно используемыми. Шаблоны потребления могут включать учетные записи хранения, базы данных, вычисления, управление удостоверениями и т. д. Рекомендации по настройке и запуску собственных служб данных можно найти в разделе Упорядочить участников группы по управлению данными для аналитики облачных вычислений в Azure, службы развертывания и управленияи службы разработки.

  • Платформа взаимодействия сетки данных: помогает отслеживать состояние работоспособности всех интерфейсов, конвейеров данных, контрактов данных,предоставленных компонентов, центральных инструментов и т. д. Azure Monitor помогает повысить доступность и производительность приложений и служб, а также обеспечить мониторинг и аналитические сведения. Для наблюдения за данными создайте зонтик на портале самообслуживания для совместной работы и других службах метаданных. Рассмотрите возможность разработки собственного озера метаданных с помощью таких служб, как Azure Cosmos DB и Центров событий Azure.

Архитектура Рынка данных

Рынок данных обычно представляет собой тонкий оркестрационный слой с привлекательным внешним видом и ощущениям, который предлагает уникальные пользовательские впечатления. В marketplace данных используются базовые репозитории метаданных, которые могут быть смесью домашних метаданных хранилищ и служб, таких как Microsoft Purview. Вы можете расширить платформу данных с дополнительными аналитическими возможностями, такими как Cognitive Services и машинного обучения. Дополнительные сведения о том, как внедрить ИИ/ML в сетке данных, см. в операционной сетке данных дляИИ/МАШИНного обучения.

Создание marketplace данных включает структуру, культуру и людей. Для этого необходимо доверять пользователям, обучать людей и работать над осведомленностью. Не недооценивайте эти действия. Ваши пользователи являются ценными ресурсами; они принадлежат или используют определенные части ландшафта данных. Более рациональное использование ваших пользователей увеличивает эффективность знаний и использования данных.

В некоторых случаях может потребоваться внешний marketplace данных. Внешние платформы данных позволяют совместно использовать продукты данных с внешними партнерами. Вы можете использовать Azure Data Share в качестве компонента.

Дальнейшие действия

управление главными данными в сетке данных.