Definir o catálogo e o esquema de destino
A seção de destino da interface do usuário de configuração do pipeline define o catálogo e o esquema padrão para um pipeline. Esse catálogo e esquema padrão são usados para todas as definições de conjunto de dados e leituras de tabela.
Observação
O modo de publicação herdado usa o esquema virtual LIVE
para obter um comportamento semelhante. No modo de publicação padrão (usado por todos os novos pipelines), a palavra-chave LIVE
é ignorada. Consulte esquema LIVE (legado).
Direcionar um conjunto de dados em um catálogo ou esquema diferente
A DLT suporta semântica de resolução de identificador de três camadas. O Databricks recomenda o uso de identificadores totalmente qualificados para consultas e instruções que visam conjuntos de dados diferentes dos padrões configurados para seu pipeline. Consulte a resolução de identificador do Catálogo Unity .
O código-fonte DLT suporta os comandos SQL USE CATALOG catalog_name
e USE SCHEMA schema_name
. Execute estes comandos para definir o catálogo atual e o esquema com escopo para o arquivo ou bloco de anotações que contém esses comandos. As operações que seguem esses comandos no arquivo de código-fonte e usam identificadores não qualificados ou parcialmente qualificados são resolvidas para o catálogo e o esquema atuais em vez dos valores padrão definidos na configuração do pipeline. Consulte Qual é o catálogo e esquema atuais?.
O que acontece se um conjunto de dados não existir?
A tabela a seguir descreve o comportamento quando o código-fonte DLT faz referência a conjuntos de dados que não existem:
Funcionamento | Resultado |
---|---|
Ler | Se uma tabela, exibição materializada, tabela de streaming ou exibição não existir para o identificador especificado, a atualização falhará. |
Escrever | Se uma vista materializada, uma tabela de streaming, uma vista ou um coletor não existirem para o identificador especificado, a atualização tentará criar o conjunto de dados. Se necessário, a atualização também cria o esquema especificado. |
Importante
Você pode receber uma mensagem de erro informando que um conjunto de dados não existe se você não tiver privilégios suficientes para exibir o conjunto de dados.
Você deve ter privilégios suficientes para ler, gravar e criar conjuntos de dados com DLT. Consulte Requisitos.