Fevereiro de 2021
Esses recursos e aprimoramentos da plataforma Azure Databricks foram lançados em fevereiro de 2021.
Observação
As versões são disponibilizadas em fases. Talvez sua conta do Azure Databricks só seja atualizada uma semana após a data de lançamento inicial.
Novo conector do Power BI para Azure Databricks (GA)
26 de fevereiro de 2021
O novo conector de Power BI para Azure Databricks, lançado em versão prévia pública em setembro de 2020, agora está em GA. Ele fornece:
- Configuração de conexão simples: o novo conector do Power BI para Azure Databricks é integrado ao Power BI e pode ser configurado com alguns cliques, usando uma caixa de diálogo simples.
- Autenticação baseada em credenciais do Microsoft Entra ID: a configuração de tokens PAT por administradores não é mais necessária.
- Importações mais rápidas e chamadas de metadados otimizadas, graças ao novo driver ODBC do Azure Databricks, que vem com melhorias significativas de desempenho.
- O acesso a dados do Azure Databricks por meio de Power BI respeita o controle de acesso à tabela do Azure Databricks e as permissões de conta de armazenamento do Azure associadas à sua identidade do Microsoft Entra ID.
Para obter mais informações, confira Conectar o Power BI ao Azure Databricks.
O log de diagnósticos de atividades do usuário no Azure Databricks está em GA
23 de fevereiro – 2 de março de 2021: versão 3.40
Capture uma trilha de auditoria detalhada das atividades que os usuários executam no Azure Databricks, já em disponibilidade geral.
Consulte Referência de log de diagnóstico.
Adicionado modification_time às respostas de Get-status e List da API REST do DBFS
23 de fevereiro – 2 de março de 2021: versão 3.40
A hora da última modificação de um objeto de arquivo já está disponível na API REST do DBFS. O modification_time já é retornado na estrutura de resposta de FileInfo pelos pontos de extremidade de API get-status e list. Um exemplo de resposta JSON para uma chamada get-status em um diretório:
{"path": "/test-directory", "is_dir": true, "file_size": 0, "modification_time": 1610366751000}
Confira API do DBFS.
Copiar com facilidade nomes de experimento longos no MLflow
16 a 23 de fevereiro de 2021: versão 3.39
Você já pode copiar o nome do experimento da página do experimento, facilitando a definição do experimento do MLflow ativo com o qual um log de notebook é executado. Consulte Obter o ID do experimento e o caminho para o experimento.
Ajustar o tamanho da memória e o número de núcleos para o fornecimento de clusters
16 a 23 de fevereiro de 2021: versão 3.39
Você já pode personalizar os clusters usados para o serviço de modelo do MLflow. Confira Integração do repositório de recursos.
O terminal da Web está em GA
16 a 23 de fevereiro de 2021: versão 3.39
O terminal da Web já está em disponibilidade geral. Ele fornece uma forma conveniente e altamente interativa para você executar comandos de shell e usar editores no nó do driver do Spark. Confira Executar comandos shell no terminal web do Azure Databricks.
O conector do Apache Spark para o Banco de Dados SQL do Azure e o SQL Server dá suporte ao Databricks Runtime 7. x e superior
16 de fevereiro de 2021
O conector do Spark para o Banco de Dados SQL do Azure e o SQL Server já dá suporte ao Spark 3 e, portanto, ao Databricks Runtime 7.x e superior.
Término do suporte da série 7.2 do Databricks Runtime
11 de fevereiro de 2021
O suporte para o Databricks Runtime 7.2, o Databricks Runtime 7.2 para Machine Learning e o Databricks Runtime 7.2 para Genomics terminou em 11 de fevereiro. Consulte ciclos de vida de suporte do Databricks.
GA do Databricks Runtime 7.6
8 de fevereiro de 2021
O Databricks Runtime 7.6 e o Databricks Runtime 7.6 ML já está em disponibilidade geral.
Para obter informações, consulte as notas sobre a versão completas em Databricks Runtime 7.6 (EoS) e Databricks Runtime 7.6 para Machine Learning (EoS).
Databricks Runtime 8.0 (Beta)
1º de fevereiro de 2021
O Databricks Runtime 8.0 e o Databricks Runtime 8.0 ML já estão disponíveis como versões beta.
Para obter informações, confira as notas sobre a versão completas em Databricks Runtime 8.0 (EoS) e Databricks Runtime 8.0 para ML (EoS).
O Databricks Runtime para Genomics foi preterido
1º de fevereiro de 2021
O Databricks não está mais criando versões do Databricks Runtime para Genomics e removerá o suporte em 24 de setembro de 2022, quando o suporte para o Databricks Runtime para Genomics 7.3 LTS for encerrado. A partir dessa data, o Databricks Runtime para Genomics não estará mais disponível para seleção quando você criar um cluster.
Para obter mais informações sobre a política e o cronograma de substituição do Databricks Runtime, consulte Versões compatíveis com o Databricks Runtime LTS.
Exibir JSON mais legível na exibição de artefato de execução do MLflow
4 a 11 de fevereiro de 2021: versão: 3.38
A saída JSON no painel de artefato do MLflow já está em um formato mais legível.
Fornecer comentários no Registro de Modelo usando a API REST
4 a 11 de fevereiro de 2021: versão: 3.38
Você já pode adicionar comentários ao Registro de Modelo usando a API REST.
Especificar facilmente valores de cluster padrão em chamadas à API
4 a 11 de fevereiro de 2021: versão: 3.38
Você já pode usar o campo applyDefaultPolicyValues ao criar e editar clusters para todas as finalidades usando a API de Clusters do Databricks. Quando true, ele usa valores padrão de política para atributos de cluster ausentes.
Ajustar a configuração de trabalho do cluster de acordo com a alocação de trabalho atual
4 a 11 de fevereiro de 2021: versão: 3.38
A lista de clusters exibe o número de trabalhos alocados para cada cluster em execução. Esse número já é mostrado na página de detalhes do cluster para que você possa comparar com facilidade o dimensionamento atual do cluster com os detalhes de configuração do cluster e fazer os ajustes de configuração conforme necessário.
Passar informações específicas de contexto para a tarefa de um trabalho com variáveis de parâmetro de tarefa
4 a 11 de fevereiro de 2021: versão: 3.38
Você já pode transmitir variáveis para tarefas que contêm informações específicas de contexto, como a ID do trabalho ou a hora de início da execução. Para obter mais informações, consulte O que é uma referência de valor dinâmico?.
Mensagens de erro de falhas do trabalho não contêm mais informações possivelmente confidenciais
4 a 11 de fevereiro de 2021: versão: 3.38
As mensagens de erro de falha de trabalho não incluem mais rastreamentos de pilha das exceções do Java. Os rastreamentos de pilha, incluídos no campo miscMessage, potencialmente expunham informações confidenciais aos usuários.