Março de 2022

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em março de 2022.

Nota

Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.

Melhor desempenho e custos para os seus pipelines Delta Live Tables com o dimensionamento automático aprimorado do Databricks

31 de março de 2022

O dimensionamento automático aprimorado do Databricks melhora a funcionalidade de dimensionamento automático de cluster existente, adicionando otimizações de carga de trabalho de streaming e suporte aprimorado para cargas de trabalho em lote. As melhorias aprimoradas no dimensionamento automático proporcionam uma utilização mais eficiente do cluster, menor uso de recursos e menor custo. Consulte Optimize a utilização do cluster dos pipelines Delta Live Tables com dimensionamento automático aprimorado.

Arquivos em repositórios habilitados por padrão em novos espaços de trabalho

30 de março de 2022

O recurso Arquivos no repositório agora está habilitado por padrão em espaços de trabalho recém-criados.

Databricks Feature Store está disponível em geral

22 de março de 2022

O Databricks Feature Store está disponível em geral. O Databricks Feature Store permite o compartilhamento e a descoberta de recursos em toda a sua organização e também garante um código de computação de recursos consistente para treinamento e inferência de modelos.

Partilhar uma experiência a partir da página da experiência

21 a 28 de março de 2022: Versão 3.68

O botão Permissões na página do experimento MLflow foi renomeado para Compartilhar. A caixa de diálogo agora inclui um link compartilhável para o experimento. Ver Alterar permissões para uma experiência.

Correção de bug do RStudio Workbench

21 a 28 de março de 2022: Versão 3.68

O RStudio Workbench mais recente depende de cookies quando você usa um arquivo de licença. Esses cookies não foram permitidos para proxy. Esse problema foi corrigido.

Novas opções de idioma do espaço de trabalho

21 de março de 2022

Os espaços de trabalho estão agora disponíveis nos seguintes idiomas:

• Español
• Português (Brasil)

Databricks Runtime 10.4 LTS e 10.4 LTS ML são GA; 10.4 Photon é visualização pública

18 de março de 2022

Databricks Runtime 10.4 LTS e Databricks Runtime 10.4 LTS ML estão agora disponíveis para o público em geral. O Databricks Runtime 10.4 Photon está em Visualização Pública.

Nota

LTS significa que esta versão está sob suporte a longo prazo. Consulte Ciclo de vida da versão do Databricks Runtime LTS.

Consulte Databricks Runtime 10.4 LTS e Databricks Runtime 10.4 LTS para Machine Learning.

O Unity Catalog está disponível na Pré-visualização Pública

10 de março de 2022

O Unity Catalog (Preview) é uma solução de governança refinada para dados e IA no lago Databricks.

O Unity Catalog ajuda a simplificar a segurança e a governança de seus dados com os seguintes recursos principais:

• Defina uma vez, proteja em todos os lugares: Unity Catalog oferece um local único para administrar políticas de acesso a dados que se aplicam a todos os espaços de trabalho e personas.
• Modelo de segurança compatível com padrões: O modelo de segurança do Unity Catalogé baseado no padrão ANSI SQL e permite que os administradores grant permissões no nível de catalogs, bancos de dados (também chamados de esquemas), tablese views em seu data lake existente usando sintaxe familiar.
• Auditoria integrada: o Unity Catalog captura automaticamente os logs de auditoria ao nível do utilizador que registam o acesso aos seus dados.

Você pode acessar dados no Unity Catalog da mesma forma que acessa dados locais em um espaço de trabalho: de um cluster de IA de Ciência & Dados ou Databricks Mosaic, um armazém SQL, o editor SQL Databricks ou usando a API REST do Unity Catalog ou a interface de linha de comando (CLI) do Unity Catalog.

Para obter mais informações, consulte O que é Unity Catalog?. Para participar da visualização pública do Unity Catalog, entre em contato com a equipa responsável pela sua conta do Azure Databricks.

O Delta Sharing está disponível na Pré-visualização Pública

10 de março de 2022

Delta Sharing (Preview) é um protocolo aberto desenvolvido pela Databricks para compartilhamento seguro de dados com outras organizações, independentemente de quais plataformas de computação elas usam. Um usuário do Databricks, chamado de "provedor de dados", pode usar o Delta Sharing para compartilhar dados em um metastore do Unity Catalog com uma pessoa ou grupo fora de sua organização, chamado de "destinatário de dados". Dados recipients pode começar a trabalhar imediatamente com a versão mais recente dos dados partilhados. Para obter uma lista completa de list conectores e informações sobre como usá-los, consulte a documentação do projeto Delta Sharing. Quando o Compartilhamento Delta está habilitado em um metastore Unity Catalog, o Unity Catalog executa um servidor de Compartilhamento Delta.

Para obter mais informações, consulte O que é o Delta Sharing?. Para participar da visualização pública do Delta Sharing, entre em contato com sua equipe de conta do Azure Databricks.

Girar a chave gerenciada pelo cliente para serviços gerenciados

10 de março de 2022

Você pode adicionar uma chave gerenciada pelo cliente (CMK) para serviços gerenciados. O Azure Databricks usa sua chave para proteger e controlar o acesso à chave que criptografa dados no plano de controle para a origem do bloco de anotações, segredos e histórico de consultas SQL do Databricks. Esta funcionalidade está em Pré-visualização Pública.

Agora você pode girar (update) a chave.

Controle de acesso aprimorado para dutos Delta Live Tables

9 de março de 2022

Agora tens mais controlo sobre o acesso aos teus pipelines Delta Live Tables, incluindo quem é o proprietário de um pipeline, quem pode visualizar ou gerir o pipeline e quem pode executá-lo. Consulte ACLs de pipeline do Delta Live Tables.

Teste a funcionalidade de pré-visualização do Delta Live Tables com a nova definição channel (Pré-visualização Pública)

7 a 14 de março de 2022: Versão 3.67

Pode testar novos recursos nos seus pipelines do Delta Live Tables com a nova configuração channel. Para testar o seu pipeline com as futuras funcionalidades, setchannel até preview. Para voltar para a versão atual, setchannel para current.

Tratamento de erros melhorado para funções Delta Live Tables Python (Visualização pública)

7 a 14 de março de 2022: Versão 3.67

Esta versão adiciona verificação de tipo para validar que as funções Delta Live Tables Python usam o tipo de dados string ao definir nomes e values para propriedades table. Anteriormente, definir propriedades table usando values, não sendo uma cadeia de caracteres, poderia fazer com que o seu pipeline falhasse sem uma mensagem de erro indicando a causa subjacente.

Melhorias no Databricks Repos

7 a 14 de março de 2022: Versão 3.67

As seguintes melhorias foram feitas no Databricks Repos.

• Pesquisa de texto e substituição em arquivos em repositórios. O editor de arquivos agora tem menus Arquivo e Editar que fornecem pesquisa, substituem e substituem todas as funcionalidades.
• Anteriormente, a Databricks recomendava que o número total de blocos de anotações e arquivos em um repositório não excedesse 2000. Esse limit foi aumentado para 5000.

Log de diagnóstico para alterações de diretiva de cluster

7 a 14 de março de 2022: Versão 3.67

Quando o registo de auditoria está ativado, um evento de auditoria é registado quando cria, updateou apaga uma política de cluster, ou quando update as permissões de utilizador para uma política de cluster. Para obter mais informações, consulte Referência de log de diagnóstico.

Databricks Runtime 10.4 (Beta)

4 de março de 2022

Databricks Runtime 10.4, 10.4 Photon e 10.4 ML estão agora disponíveis como versões Beta.

Consulte as notas de versão completas em Databricks Runtime 10.4 LTS e Databricks Runtime 10.4 LTS for Machine Learning.