Fevereiro de 2021
Esses recursos e melhorias na plataforma Azure Databricks foram lançados em fevereiro de 2021.
Nota
Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.
Novo conector do Azure Databricks Power BI (GA)
26 de fevereiro de 2021
O novo conector do Power BI para Azure Databricks, lançado em pré-visualização pública em setembro de 2020, é agora GA. Fornece:
- Configuração de conexão simples: o novo conector Power BI Azure Databricks é integrado ao Power BI e você o configura usando uma caixa de diálogo simples com alguns cliques.
- Autenticação baseada no Microsoft Entra ID credentials— não é mais necessário que os administradores configurem tokens PAT.
- Importações mais rápidas e chamadas de metadados otimizadas, graças ao novo driver ODBC do Azure Databricks, que vem com melhorias significativas de desempenho.
- O acesso aos dados do Azure Databricks através do Power BI respeita o controlo de acesso do Azure Databricks table e as permissões da conta de armazenamento do Azure associadas à sua identidade Microsoft Entra ID.
Para obter mais informações, consulte Conectar o Power BI ao Azure Databricks.
O log de diagnóstico de atividades do usuário no Azure Databricks é GA
23 de fevereiro a 2 de março de 2021: Versão 3.40
Capture uma trilha de auditoria detalhada das atividades que seus usuários executam no Azure Databricks, agora disponível ao público em geral.
Consulte Referência do log de diagnóstico.
Adicionado modification_time às respostas de status gete list da API REST do DBFS
23 de fevereiro a 2 de março de 2021: Versão 3.40
A hora da última modificação de um objeto de arquivo agora está disponível na API REST do DBFS. O modification_time
agora é retornado na estrutura de resposta FileInfo pelos endpoints get-status e da API list. Um exemplo de resposta JSON para uma chamada get-status em um diretório:
{"path": "/test-directory", "is_dir": true, "file_size": 0, "modification_time": 1610366751000}
Consulte API DBFS.
Copie facilmente nomes de experimentos longos no MLflow
16 a 23 de fevereiro de 2021: Versão 3.39
Agora você pode copiar o nome do experimento da página do experimento, facilitando a set o experimento MLflow ativo no qual um bloco de anotações registra é executado. Ver Get ID do experimento e o caminho para o experimento.
Ajustar o tamanho da memória e o número de núcleos para servir clusters
16 a 23 de fevereiro de 2021: Versão 3.39
Agora você pode personalizar clusters usados para servir o modelo MLflow. Consulte Integração com a loja de recursos.
O terminal Web agora é GA
16 a 23 de fevereiro de 2021: Versão 3.39
O terminal Web está agora disponível para o público em geral. Ele fornece uma maneira conveniente e altamente interativa para você executar comandos shell e usar editores no nó do driver Spark. Consulte Executar comandos de shell no terminal Web do Azure Databricks.
O conector Apache Spark para o Banco de Dados SQL do Azure e o SQL Server dá suporte ao Databricks Runtime 7.x e superior
16 de fevereiro de 2021
O conector Spark para o Banco de Dados SQL do Azure e o SQL Server agora oferece suporte ao Spark 3 e, portanto, ao Databricks Runtime 7.x e superior.
Termina o suporte da série Databricks Runtime 7.2
11 de fevereiro de 2021
O suporte para Databricks Runtime 7.2, Databricks Runtime 7.2 para Machine Learning e Databricks Runtime 7.2 para Genomics terminou em 11 de fevereiro. Consulte Ciclos de vida de suporte do Databricks.
Tempo de execução do Databricks 7.6 GA
8 de fevereiro de 2021
O Databricks Runtime 7.6 e o Databricks Runtime 7.6 ML estão agora disponíveis para o público em geral.
Para obter informações, consulte as notas de versão completas em Databricks Runtime 7.6 (EoS) e Databricks Runtime 7.6 for Machine Learning (EoS).
Databricks Runtime 8.0 (Beta)
1 de fevereiro de 2021
O Databricks Runtime 8.0 e o Databricks Runtime 8.0 ML já estão disponíveis como versões Beta.
Para obter informações, consulte as notas de versão completas em Databricks Runtime 8.0 (EoS) e Databricks Runtime 8.0 for ML (EoS).
O Databricks Runtime para Genomics foi preterido
1 de fevereiro de 2021
O Databricks não está mais construindo novas versões do Databricks Runtime for Genomics e remove suporte para o Databricks Runtime for Genomics em 24 de setembro de 2022, quando o suporte ao Databricks Runtime for Genomics 7.3 LTS terminar. Nesse ponto, o Databricks Runtime for Genomics não estará mais disponível para seleção quando você criar um cluster.
Para obter mais informações sobre a política e o cronograma de substituição do Databricks Runtime, consulte Versões LTS do Databricks Runtime suportadas.
Exibir JSON mais legível na exibição do artefato de execução MLflow
4 a 11 de fevereiro de 2021: Versão 3.38
A saída JSON no painel de artefatos MLflow agora está em um formato mais legível.
Fornecer comentários no Registro Modelo usando a API REST
4 a 11 de fevereiro de 2021: Versão 3.38
Agora você pode adicionar comentários no Registro Modelo usando a API REST.
Especifique facilmente o cluster padrão values em chamadas de API
4 a 11 de fevereiro de 2021: Versão 3.38
Agora você pode usar o applyDefaultPolicyValues
campo ao criar e editar clusters multiuso usando a API de Clusters Databricks. Quando true
, ele usa políticavalues padrão para atributos de cluster ausentes.
Ajustar a configuração do trabalhador do cluster de acordo com a alocação atual do trabalhador
4 a 11 de fevereiro de 2021: Versão 3.38
O cluster list exibe o número de trabalhadores alocados para cada cluster em execução. Esse número agora é mostrado na página de detalhes do cluster para que você possa comparar facilmente o tamanho atual do cluster com os detalhes de configuração do cluster e fazer ajustes de configuração conforme necessário.
Passar informações específicas de contexto para a tarefa de um trabalho com variáveis de parâmetro de tarefa
4 a 11 de fevereiro de 2021: Versão 3.38
Agora você pode passar variáveis para tarefas que contêm informações específicas do contexto, como a ID do trabalho ou a hora de início da execução. Para obter mais informações, consulte O que é uma referência de valor dinâmico?.
As mensagens de erro de falhas de trabalho não contêm mais informações possivelmente confidenciais
4 a 11 de fevereiro de 2021: Versão 3.38
As mensagens de erro de falha de trabalho não incluem mais rastreamentos de pilha de exceções Java. Os rastreamentos de pilha, incluídos no miscMessage
campo, potencialmente expuseram informações confidenciais aos usuários.