Compartir vía

Limitaciones de Delta Live Tables

  • Artículo

A continuación se muestran las limitaciones de Delta Live Tables que son importantes para conocer a medida que desarrolla las canalizaciones:

  • Un área de trabajo de Azure Databricks se limita a 100 actualizaciones de canalización simultáneas. El número de conjuntos de datos que puede contener una sola canalización viene determinado por la configuración de canalización y la complejidad de la carga de trabajo.
  • Los conjuntos de datos de Delta Live Tables solo se pueden definir una vez. Por este motivo, solo pueden ser objeto de una única operación en todas las canalizaciones de Delta Live Tables. La excepción son las tablas de streaming con procesamiento de flujo de anexión, lo que permite escribir en la tabla de streaming desde diferentes orígenes de streaming. Consulte Uso del flujo de anexión para escribir en una tabla de streaming desde varias secuencias de origen.
  • Las columnas de identidad tienen las siguientes limitaciones. Para obtener más información sobre las columnas de identidad de las tablas Delta, consulte Uso de columnas de identidad en Delta Lake.
    • Las columnas de identidad no se admiten con tablas que son el destino del procesamiento de APPLY CHANGES.
    • Es posible que las columnas de identidad se vuelvan a calcular durante las actualizaciones de vistas materializadas. Por este motivo, Databricks recomienda usar columnas de identidad en Delta Live Tables solo con tablas de streaming.
  • Los conjuntos de datos creados en una canalización de Delta Live Tables se escriben solo en Delta Lake. No se pueden generar datos de una canalización a receptores que no sean de Delta Lake.
  • Las vistas materializadas y las tablas de streaming, incluidas las creadas por una canalización de Delta Live Tables o Databricks SQL, solo son accesibles para los clientes y aplicaciones de Azure Databricks.
  • No puede usar Delta Sharing para compartir vistas materializadas y tablas de streaming creadas por una canalización de Delta Live Tables.
  • Hay limitaciones en los recursos de computación de Databricks necesarios para ejecutar y consultar las canalizaciones de Unity Catalog. Consulta los Requisitos para las canalizaciones que se publican en Unity Catalog.
  • Solo el propietario de la canalización puede acceder al registro de eventos de una canalización. Acceda a Consulta del registro de eventos.
  • Las consultas de viaje en el tiempo de Delta Lake solo se admiten con tablas de streaming y no son compatibles con vistas materializadas. Consulta Trabajo con el historial de tablas de Delta Lake.
  • No se pueden habilitar las lecturas de Iceberg en vistas materializadas y tablas de streaming creadas por las canalizaciones de Delta Live Tables.