Compartir a través de

Creación de reflejo del Unity Catalog de Azure Databricks (versión preliminar)

  • Artículo

En la actualidad, muchas organizaciones registran sus datos en Unity Catalog en Azure Databricks. Un Unity Catalog reflejado en Fabric permite al cliente leer datos administrados por Unity Catalog desde cargas de trabajo de Fabric. Azure Databricks y Fabric son mejores juntos.

Para ver un tutorial sobre cómo configurar el área de trabajo de Azure Databricks para crear un reflejo de Unity Catalog en Fabric, consulte Tutorial: Configuración de bases de datos reflejadas de Microsoft Fabric desde Azure Databricks (versión preliminar).

Las bases de datos reflejadas en Fabric permiten a los usuarios disfrutar de un producto muy integrado, de un extremo a otro y fácil de usar diseñado para simplificar sus necesidades de análisis. Puede disfrutar de un producto fácil de usar diseñado para simplificar sus necesidades de análisis y crearse para abrir y colaborar entre Microsoft Fabric y Azure Databricks.

Cuando se usa Fabric para leer datos registrados en Unity Catalog, no hay movimiento de datos ni replicación de datos. Solo se refleja la estructura del catálogo de Azure Databricks en Fabric y se accede a los datos de catálogo subyacentes a través de accesos directos. Por tanto, los cambios en los datos se reflejan inmediatamente en Fabric.

¿Qué experiencias de análisis se crean?

Los catálogos reflejados son un elemento de Almacenamiento de datos de Fabric distinto de los elementos de punto de conexión de análisis SQL y Almacén.

Al reflejar un Unity Catalog de Azure Databricks, Fabric crea tres elementos:

Puede acceder a los datos reflejados de Azure Databricks de varias maneras:

  • Cada elemento de Azure Databricks reflejado tiene un punto de conexión de SQL Analytics generado automáticamente que proporciona una experiencia analítica enriquecida creada por el proceso de creación de reflejo. Use comandos de T-SQL para definir y consultar objetos de datos desde el punto de conexión de SQL Analytics de solo lectura.
  • Use Power BI con el modo Direct Lake para crear informes en el elemento de Azure Databricks.

Sincronización de metadatos

Cuando se crea una nueva base de datos reflejada desde Azure Databricks en Fabric, de forma predeterminada, se habilita la sincronización automática de los cambios futuros del catálogo para el esquema seleccionado. Los siguientes cambios de metadatos se reflejan desde el área de trabajo de Azure Databricks a Fabric si está habilitada la sincronización automática:

  • Adición de esquemas a un catálogo.
  • Eliminación de esquemas de un catálogo.
  • Adición de tablas a un esquema.
  • Eliminación de tablas de un esquema.

Selección de esquema/tabla:

  • De forma predeterminada, se selecciona todo el catálogo cuando el usuario agrega el catálogo.
  • El usuario puede excluir determinadas tablas dentro del esquema.
  • Anular la selección de un esquema anula la selección de todas las tablas del esquema.
  • Si el usuario vuelve y selecciona el esquema, se vuelven a seleccionar todas las tablas del esquema.
  • El mismo comportamiento de selección se aplica a los esquemas de un catálogo.

Hay otras condiciones de filtración que se aplican a catálogos, esquemas o tablas:

  • No se mostrarán las vistas materializadas ni las tablas de streaming.
  • Las tablas externas que no admiten el formato Delta no se mostrarán.

Contenido relacionado