Поделиться через

Зеркальное отображение каталога Unity Azure Databricks (предварительная версия)

  • Статья

Многие организации сегодня регистрируют свои данные в каталоге Unity в Azure Databricks. Зеркальный каталог Unity в Fabric позволяет клиенту считывать данные, управляемые каталогом Unity из рабочих нагрузок Fabric. Azure Databricks и Fabric лучше объединяются.

Руководство по настройке рабочей области Azure Databricks для зеркального отображения каталога Unity в Fabric см. в руководстве по настройке зеркальных баз данных Microsoft Fabric из Azure Databricks (предварительная версия).

Зеркальные базы данных в Fabric позволяют пользователям использовать высоко интегрированный, комплексный и простой продукт, предназначенный для упрощения потребностей аналитики. Вы можете использовать простой продукт, предназначенный для упрощения потребностей аналитики и построен для открытости и совместной работы между Microsoft Fabric и Azure Databricks.

При использовании Fabric для чтения данных, зарегистрированных в каталоге Unity, нет перемещения данных или репликации данных. Только структура каталога Azure Databricks зеркально отображается в Fabric, а доступ к базовым данным каталога осуществляется через сочетания клавиш. Поэтому любые изменения в данных отражаются немедленно в Fabric.

Встроенные возможности аналитики

Зеркальные каталоги — это элемент в Хранилище данных Fabric, отличный от конечной точки хранилища и аналитики SQL.

При зеркальном отображении каталога Unity Azure Databricks Fabric создает три элемента:

Вы можете получить доступ к зеркальным данным Azure Databricks несколькими способами:

  • Каждый зеркальный элемент Azure Databricks имеет автоматически созданную конечную точку аналитики SQL, которая обеспечивает широкий аналитический интерфейс, созданный процессом зеркального отображения. Используйте команды T-SQL для определения и запроса объектов данных из конечной точки аналитики SQL только для чтения.
  • Используйте Power BI в режиме Direct Lake для создания отчетов в элементе Azure Databricks.

Синхронизация метаданных

При создании новой зеркальной базы данных из Azure Databricks в Fabric по умолчанию включена автоматическая синхронизация изменений в будущем каталоге для выбранной схемы . Следующие изменения метаданных отражаются из рабочей области Azure Databricks в Fabric, если включена автоматическая синхронизация:

  • Добавление схем в каталог.
  • Удаление схем из каталога.
  • Добавление таблиц в схему.
  • Удаление таблиц из схемы.

Выбор схемы или таблицы:

  • По умолчанию весь каталог выбирается при добавлении каталога.
  • Пользователь может исключить определенные таблицы в схеме.
  • Отмена выбора схемы отменяет выбор всех таблиц в схеме.
  • Если пользователь возвращается и выбирает схему, все таблицы в схеме будут выбраны снова.
  • То же поведение выбора применяется к схемам в каталоге.

Существуют другие условия фильтрации, применяемые к каталогам, схемам и таблицам:

  • Материализованные представления и таблицы потоковой передачи не будут отображаться.
  • Внешние таблицы, не поддерживающие формат Delta, не будут отображаться.

Связанный контент