Março de 2023
Esses recursos e melhorias na plataforma Azure Databricks foram lançados em março de 2023.
Nota
Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.
Databricks Terraform provedor atualizado para a versão 1.14.0
31 de março de 2023
A versão 1.14.0 adiciona um exemplo para girar automaticamente um token de acesso, uma run_if condição e um gatilho de chegada de databricks_job arquivo ao recurso e muito mais. Para obter mais detalhes, consulte o changelog para a versão 1.14.0.
Termina o suporte ao Databricks Runtime 7.3 LTS ML
31 de março de 2023
O suporte para Databricks Runtime 7.3 LTS para Machine Learning terminou em 31 de março. Consulte Ciclos de vida de suporte do Databricks.
Preparação distribuída com o TorchDistributor
27 de março de 2023
Com o Databricks Runtime 13.0 ML e superior, você pode realizar treinamento distribuído em modelos PyTorch ML usando o TorchDistributor. Consulte Treinamento distribuído com TorchDistributor.
TorchDistributor é um módulo de código aberto no PySpark que ajuda os usuários a fazer treinamento distribuído com o PyTorch em seus clusters Spark, então ele permite que você inicie trabalhos de treinamento do PyTorch como trabalhos do Spark.
Databricks Runtime 13.0 (Beta)
24 de março de 2023
O Databricks Runtime 13.0 e o Databricks Runtime 13.0 ML já estão disponíveis como versões Beta.
Consulte Databricks Runtime 13.0 (EoS) e Databricks Runtime 13.0 para Machine Learning (EoS).
Editor de ficheiros melhorado
24 de março de 2023
O editor de arquivos foi atualizado para trazer muitos dos recursos do notebook para sua experiência de edição de arquivos. Além disso, agora você pode executar diretamente arquivos Python, SQL, R e Scala a partir do editor de arquivos. Para obter detalhes, consulte Usar o bloco de anotações e o editor de arquivos Databricks.
Alterar a redundância de armazenamento raiz do DBFS para espaços de trabalho existentes do Azure Databricks
23 de março de 2023
Os usuários agora têm a opção de alterar a redundância de sua conta de armazenamento raiz DBFS. Consulte Alterar opções de redundância de armazenamento do espaço de trabalho.
Suporte a notebook .ipynb (Jupyter) no Repos (visualização)
22 de março de 2023
O suporte para notebooks Jupyter (arquivos .ipynb) está disponível em Repos. Você pode clonar repositórios com blocos de anotações .ipynb, trabalhar na interface do usuário do Databricks e, em seguida, confirmar e enviar por push como blocos de anotações .ipynb. Os metadados, como um painel do bloco de anotações, são preservados. Os administradores podem controlar se as saídas podem ser confirmadas ou não.
Também pode:
- Crie novos blocos de anotações .ipynb.
- Converta blocos de anotações para o formato de arquivo .ipynb.
- Visualize diffs como Code diff (alterações de código em células) ou Raw diff (alterações de código em JSON, incluindo metadados).
Consulte Permitir confirmação da saída do bloco de anotações .ipynb.
Suporte para reload4j
21 de março de 2023
O Reload4j 1.2.19 está substituindo o log4j nas versões 10.4 e anteriores do Databricks Runtime.
Novos endereços IP para a região da Ásia Oriental
15 de março de 2023
O Azure Databricks adicionou um novo plano de controle dedicado para a eastasia região. Se você hospedar um espaço de trabalho do Azure Databricks em sua própria VNet (também conhecida como injeção de VNet) na região do Leste Asiático, provavelmente gerenciará o tráfego de rede para seu espaço de trabalho usando rotas personalizadas (UDR). Em caso afirmativo, você deve update essas rotas usando os endereços IP e domínios adicionais listados em endereços IP e domínios para serviços e ativos do Azure Databricks.
Executar células SQL no bloco de anotações em paralelo
15 de março de 2023
Agora você pode executar células SQL em blocos de anotações do Azure Databricks em paralelo enquanto estiver conectado a um cluster interativo. Consulte Executar células SQL em paralelo.
Criar tarefas de trabalho usando o código Python armazenado em um repositório Git
14 de março de 2023
Agora você pode recuperar o código Python de um provedor Git quando adiciona uma tarefa Python a um trabalho do Azure Databricks, simplificando a integração de seus trabalhos com seus fluxos de trabalho de CI/CD. Consulte Usar o Git com trabalhos.
Databricks Terraform provedor atualizado para a versão 1.13.0
14 de março de 2023
A versão 1.13.0 adiciona um databricks_sql_alert recurso e muito mais. Para obter mais detalhes, consulte o changelog da versão 1.13.0.
Databricks Terraform provedor atualizado para a versão 1.12.0
9 de março de 2023
A versão 1.12.0 adiciona um databricks_model_serving recurso, substitui o schedule bloco dentro do databricks_sql_query recurso e muito mais. Para obter mais detalhes, consulte o changelog para a versão 1.12.0.
Console de administração do SQL e console de administração do espaço de trabalho combinados
9 de março de 2023
O console de administração do SQL foi combinado com as configurações gerais de administração para criar uma experiência unificada para usuários administradores. Todas as configurações de administração do SQL agora são acessadas no console de administração.
Modelo de Servir é GA
7 de março de 2023
O Model Serving, anteriormente Serverless Real-Time Inference, agora está disponível para o público em geral.
O Model Serving fornece um serviço altamente disponível e de baixa latência para a implantação de modelos. O serviço aumenta ou diminui automaticamente para atender às mudanças de demanda dentro do intervalo de simultaneidade escolhido. Consulte Implementar modelos utilizando o Mosaic AI Model Serving.
A pesquisa automática de recursos é GA
7 de março de 2023
A pesquisa automática de recursos com o Model Serving agora está disponível para o público em geral. Para obter detalhes, consulte Pesquisa automática de recursos com o Databricks Model Serving.
Para novos espaços de trabalho que usam UDRs, o IP de armazenamento do Azure precisa de um UDR adicional
6 de março de 2023
Devido a alterações no armazenamento raiz DBFS para novos espaços de trabalho, os novos espaços de trabalho que usam injeção de VNet e definem rotas definidas pelo usuário (UDRs) usando endereços IP em vez das tags de serviço recomendadas devem adicionar um UDR do Azure adicional para cada VNet. Para configurar as duas UDRs, consulte Endereço IP de armazenamento raiz DBFS. Essa alteração não afeta os espaços de trabalho existentes.
O armazenamento raiz DBFS do Azure Databricks usa o Azure Data Lake Storage Gen2 para novos espaços de trabalho
6 de março de 2023
Os novos espaços de trabalho do Azure Databricks usam contas de armazenamento do Azure Data Lake Storage Gen2 para a raiz DBFS. Os espaços de trabalho existentes do Azure Databricks continuam a usar o armazenamento de Blob para a raiz DBFS. Consulte Introdução ao Azure Data Lake Storage Gen2.
Nova disponibilidade do Catalog Explorer
6 de março de 2023
Uma nova versão do Catalog Explorer agora está disponível em todos os espaços de trabalho que usam uma versão suportada do Databricks Runtime 7.3 ou posterior.
Visualizar consultas frequentes e utilizadores de um table através do separador Informações
6 de março de 2023
Agora podes usar o separador Insights no Catalog Explorer para visualizar as consultas e os utilizadores mais frequentes de qualquer table registado no Unity Catalog. Você deve ter o privilégio de SELECT em um table para ver estes dados, e vê apenas as consultas para as quais tem permissão. Consulte Veja consultas frequentes e utilizadores de um table.
A pesquisa de correspondência exata está disponível na pesquisa global
3 de março de 2023
Agora você pode pesquisar frases exatas usando aspas na pesquisa global. Consulte Pesquisar objetos de espaço de trabalho.
Exibir informações de linhagem para seus trabalhos do Azure Databricks
3 de março de 2023
Se o Unity Catalog estiver ativado no seu espaço de trabalho, pode visualizar informações de linhagem para os seus trabalhos na UI de Trabalhos do Azure Databricks, incluindo o upstream tables que o trabalho lê e o downstream tables para onde o trabalho grava. Consulte Exibir informações de linhagem para um trabalho.
Databricks Runtime 12.2 LTS e Databricks Runtime 12.2 LTS ML são GA
2 de março de 2023
Databricks Runtime 12.2 LTS e Databricks Runtime 12.2 LTS ML estão agora disponíveis para o público em geral.
Consulte Databricks Runtime 12.2 LTS e Databricks Runtime 12.2 LTS para Machine Learning.
Os ficheiros da área de trabalho estão agora em Pré-visualização Pública
6 de março de 2023
Agora você pode trabalhar com arquivos que não sejam de bloco de anotações no Azure Databricks. Os arquivos de espaços de trabalho são habilitados por padrão em todos os espaços de trabalho. Consulte O que são arquivos de espaço de trabalho?.