Novembro de 2021

Artigo
12/26/2024

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em novembro de 2021.

Nota

Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.

Criar tags para a funcionalidade tables (Visualização pública)

30 de novembro a 6 de dezembro de 2021: Versão 3.60

Agora pode criar tags para a funcionalidade tables e usá-las para pesquisar por elas.

Realce de sintaxe e preenchimento automático para comandos SQL em células Python

30 de novembro a 6 de dezembro de 2021: Versão 3.60

O realce de sintaxe e o preenchimento automático do SQL estão disponíveis quando você usa o SQL dentro de um comando Python, como em um spark.sql comando.

Renomear, excluir e alterar permissões para experimentos MLflow da página do experimento (Visualização pública)

30 de novembro a 6 de dezembro de 2021: Versão 3.60

Agora você pode renomear, excluir e alterar permissões para um experimento MLflow em sua página de experimento. Para obter detalhes, consulte Gerenciar experimentos.

Novos perfis de dados em blocos de notas: resumos tabulares e gráficos dos seus dados (Pré-visualização Pública)

30 de novembro a 6 de dezembro de 2021: Versão 3.60

Quando você usa display(<dataframe>) em Scala ou Python ou executa uma consulta SQL, o painel de resultados mostra uma nova guia Data Profile que apresenta um resumo tabular e gráfico interativo do DataFrame ou table. Para obter detalhes, consulte Criar um novo perfil de dados e Criar uma nova visualização.

Você também pode usar o comando de utilitários Databricks dbutils.data.summarize.

Melhoria no registo quando os esquemas evoluem durante a execução de um pipeline Delta Live Tables

30 de novembro a 6 de dezembro de 2021: Versão 3.60

Se o pipeline do Delta Live Tables ler dados com o Auto Loader e a schema dos dados de entrada mudar enquanto um update estiver em execução, o update será registrado como CANCELED e repetido automaticamente. O novo update é registado com o estado SCHEMA_CHANGE. Anteriormente, quando a entrada schema era alterada, o update era registado como FAILED, mesmo que o Delta Live Tables tentasse novamente o updateautomaticamente.

Databricks Partner Connect GA

18 de novembro de 2021

O Databricks Partner Connect já está disponível para o público em geral. Você pode usar o Partner Connect para descobrir e conectar dados e ferramentas de IA populares de forma rápida e fácil ao seu lago Azure Databricks. Consulte O que é o Databricks Partner Connect?.

Quebrando a mudança: remove escapando e cotações de $ na variável de ambiente values para criação de cluster

15 a 30 de novembro de 2021: Versão 3.59

Nota

Esta alteração será revertida em 3 de dezembro de 2021 das 01:00-03:00 UTC.

Ao criar um cluster, você pode especificar variáveis de ambiente. Antes dessa alteração, para usar um $ valor de variável dentro de um ambiente, você precisava escapar dele ou envolvê-lo entre aspas. Com essa mudança, caracteres de escape ou aspas não são mais necessários. Essa alteração introduz um comportamento de quebra, pois os caracteres de $ escapados ou citados na variável de ambiente values agora não são mais interpretados como $. Por exemplo, agora, dadas as seguintes declarações de variáveis de ambiente:

WITH_ESCAPING=\\$123
WITH_DOUBLE_QUOTING="$123"
NO_ESCAPING=$123
WITH_SINGLE_QUOTING='$123'
NO_QUOTING=$123

Imprimir estes values a partir de um bloco de notas, por exemplo:

%sh
echo ${WITH_ESCAPING}
echo ${WITH_DOUBLE_QUOTING}
echo ${NO_ESCAPING}
echo ${WITH_SINGLE_QUOTING}
echo ${NO_QUOTING}

Devolve o seguinte values:

\\$123
"$123"
$123
driver23
$123

Nota

Esta alteração aplica-se apenas a variáveis de ambiente. Não se aplica a segredos.

Melhorias de facilidade de uso para arquivos em repositórios

15 a 30 de novembro de 2021: Versão 3.59

Novos recursos foram adicionados ao editor de texto de arquivos:

Uma tag close é gerada automaticamente quando você cria uma tag.
A dobragem de código já está disponível.

Além disso, para arquivos de texto, agora você pode copiar o caminho de repositório completo, além do caminho da raiz do repositório. Para obter detalhes, consulte Interagir programaticamente com arquivos de espaço de trabalho.

O suporte para widgets SQL herdados termina em 15 de janeiro de 2022

15 de novembro de 2021

O Databricks encerrará o suporte para widgets SQL herdados em 15 de janeiro de 2022. Após essa data, os notebooks não renderizarão mais widgets SQL herdados na interface de utilizador, mas parameters passados por através %run ainda funcionarão com a API de widget SQL herdada. Para garantir que seus widgets continuem a ser renderizados na interface do usuário, update seu código para usar os widgets SQL.

Melhorias na interface do usuário para trabalhos do Azure Databricks

15 a 30 de novembro de 2021: Versão 3.59

Esta versão inclui os seguintes aprimoramentos na interface do usuário de trabalhos:

Agora você pode clonar uma única tarefa, facilitando a adição de novas tarefas a um trabalho existente. Consulte Renomear, clonar ou excluir um trabalho.
Ao visualizar os detalhes da execução do trabalho ou detalhes da execução da tarefa, o ID do Trabalho e o ID da execução do trabalho agora são links, permitindo que você alterne facilmente entre os detalhes dos trabalhos views. Consulte Exibir detalhes da execução do trabalho.
Agora você pode copiar o caminho para uma tarefa, por exemplo, um caminho de bloco de anotações, ao visualizar ou editar uma tarefa. Consulte Copiar um caminho de tarefa.

15 de novembro de 2021

Lançamos o conector de Compartilhamento Delta do Power BI, que permite aos usuários descobrir, analisar e visualizar conjuntos de dados compartilhados por meio do protocolo aberto de Compartilhamento Delta . O protocolo permite a troca segura de conjuntos de dados entre produtos e plataformas, aproveitando o REST e o armazenamento em nuvem. Para obter detalhes, consulte Conector de compartilhamento delta do Power BI.

Databricks driver ODBC 2.6.19

12 de novembro de 2021

Lançamos a versão 2.6.19 do driver ODBC Databricks (download). O novo driver propaga condições de erro SQL (SQLState) retornadas pelo Databricks para o cliente.

Databricks Runtime 10.1 e 10.1 ML são GA; 10.1 Photon é visualização pública

10 de novembro de 2021

Databricks Runtime 10.1 e 10.1 ML estão agora disponíveis para o público em geral. 10.1 Photon está em Visualização Pública.

Consulte Databricks Runtime 10.1 (EoS) e Databricks Runtime 10.1 para ML (EoS).

Databricks Runtime 10.1 (Beta)

4 de novembro de 2021

Databricks Runtime 10.1, 10.1 Photon e 10.1 ML estão agora disponíveis como versões Beta.

Consulte as notas de versão completas em Databricks Runtime 10.1 (EoS) e Databricks Runtime 10.1 for ML (EoS).

Renomear e excluir experimentos MLflow (Visualização pública)

2 a 8 de novembro de 2021: Versão 3.58

Agora você pode renomear, excluir e alterar permissões para um experimento MLflow na página Experimentos.

Agora você pode criar uma política de cluster clonando uma política existente

2 a 8 de novembro de 2021: Versão 3.58

Foi adicionado suporte para a criação de uma nova política de cluster clonando uma política existente. Consulte Criar e gerenciar políticas de computação.

Alterar o idioma padrão de blocos de anotações e células de bloco de anotações com mais facilidade

2 a 8 de novembro de 2021: Versão 3.58

Um novo botão de idioma aparece na parte superior do bloco de anotações e em cada célula. Pode utilizar este botão para select o idioma predefinido do bloco de notas e para select o idioma de uma célula específica. Para obter mais informações, consulte Set de idioma padrão e Misturar linguagens.

Usar arquivos no Repos a partir do terminal da Web

2 a 8 de novembro de 2021: Versão 3.58

Agora você pode acessar Arquivos no Repos a partir do terminal web usando o caminho /Workspace.