Novembro de 2024
Esses recursos e melhorias na plataforma Azure Databricks foram lançados em novembro de 2024.
Nota
Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.
Metadados adicionais para a tooltip de tabelas em cadernos
25 de novembro de 2024
Ao colocar o cursor sobre o nome de uma tabela do Catálogo Unity numa célula de bloco de notas, a dica de ferramenta agora inclui os seguintes metadados:
- Proprietário
- Última atualização
- Tamanho
- Descrição
- Um link para exibir a tabela no painel lateral do Catalog Explorer
A atualização automática do cluster e a interface do usuário aprimorada de segurança e conformidade estão geralmente disponíveis
19 de novembro de 2024
A atualização automática do cluster agora está disponível para o público em geral. A atualização automática de cluster garante que todos os clusters em um espaço de trabalho sejam atualizados periodicamente para a imagem mais recente do sistema operacional host e as atualizações de segurança. A capacidade de habilitar recursos aprimorados de segurança e conformidade no console da conta também está agora disponível ao público em geral. Consulte Atualização automática de cluster e Configurar configurações de conformidade e segurança aprimoradas.
Suporte expandido para depurador Python em notebooks
18 de novembro de 2024
O depurador Python integrado em notebooks Databricks agora é suportado em computação sem servidor e computação configurada com modo de acesso compartilhado no Databricks Runtime 14.3 LTS ou superior. Para saber mais sobre o depurador, consulte Depurar blocos de anotações.
Experiência melhorada no terminal Web
18 de novembro de 2024
A Databricks fez as seguintes melhorias na experiência do terminal web:
- Suporte para arquivos de configuração: Agora você pode definir configurações persistentes para seu terminal da Web Databricks com arquivos de configuração .bashrc. Consulte Configurar o seu terminal da Web.
- Histórico do ciclo de comandos: Agora você pode percorrer comandos executados em sessões anteriores com as teclas de seta "Para cima" e "Para baixo". Isso facilita a recuperação e reutilização de comandos anteriores sem digitá-los novamente.
- Suporte a clusters compartilhados: Nosso terminal da Web aprimorado está disponível em clusters compartilhados no Databricks Runtime 15.1 e superior.
Para saber mais sobre como usar o terminal Web, consulte Executar comandos de shell no terminal Web do Azure Databricks.
Histórico de consultas e suporte de perfil de consulta para Delta Live Tables
15 de novembro de 2024
O Azure Databricks agora oferece ferramentas aprimoradas para monitorar o desempenho da consulta em pipelines do Delta Live Tables. Consulte histórico de consultas do Access para pipelines do Delta Live Tables.
Rebranding do Mosaic AI Model Training
15 de novembro de 2024
O Mosaic AI Model Training foi renomeado para abranger os recursos existentes:
- O Foundation Model Fine-tuning, anteriormente conhecido como Mosaic AI Model Training, continua a oferecer personalização avançada para modelos de fundação.
- Os recursos do AutoML agora podem ser acessados na seção Experimentos .
Reutilizar saídas SQL como _sqldf em células SQL subsequentes
15 de novembro de 2024
No Databricks Runtime 14.3 e superior, a execução de uma consulta SQL em um bloco de anotações Databricks gera um DataFrame implícito (_sqldf) que você pode usar em células SQL downstream. Isso aumenta o suporte para usar a _sqldf variável em células Python introduzido no Databricks Runtime 13.3. Consulte Explorar resultados de células SQL.
Conectividade privada do suporte de computação sem servidor para recursos gerenciados pelo Azure
15 de novembro de 2024
Todos os recursos gerenciados pelo Azure com suporte de ponto de extremidade privado nativo agora são suportados pela computação sem servidor. Este recurso está disponível em geral. Consulte Configurar conectividade privada a partir de computação sem servidor.
Suporte de conectividade privada para trabalhos, notebooks e Delta Live Tables
15 de novembro de 2024
A conectividade privada para computação sem servidor agora suporta trabalhos, notebooks e cargas de trabalho do Delta Live Tables. Este recurso está disponível em geral. Consulte Configurar conectividade privada a partir de computação sem servidor.
A tabela do sistema de armazéns já está disponível (Visualização pública)
15 de novembro de 2024
A tabela system.compute.warehouses registra as configurações do SQL warehouse. Cada linha é um instantâneo das propriedades de um SQL warehouse em um ponto específico no tempo. Um novo instantâneo é criado quando as propriedades são alteradas. Consulte a tabela de referência do sistema de Armazéns .
Partilha de vistas entre plataformas (Pré-visualização Pública)
14 de novembro de 2024
Os destinatários do Databricks agora podem consultar exibições compartilhadas usando qualquer recurso de computação do Databricks. Anteriormente, se a conta do Azure Databricks de um destinatário fosse diferente da conta do provedor, os destinatários só poderiam consultar uma exibição compartilhada usando um SQL warehouse sem servidor. Ver as vistas partilhadas .
O compartilhamento de exibição agora também se estende a conectores de compartilhamento abertos. Consulte Ler dados compartilhados usando o compartilhamento aberto do Delta Sharing (para destinatários).
A pré-visualização pública das Salas Limpas não está disponível, com novas funcionalidades
13 de novembro de 2024
O Databricks Clean Rooms usa o Delta Sharing e a computação sem servidor para fornecer um ambiente seguro e que protege a privacidade, onde várias partes podem compartilhar dados corporativos confidenciais e colaborar sem acesso direto aos dados uns dos outros. A visualização pública do Clean Rooms agora está aberta a todos os clientes no Azure e na AWS e inclui os seguintes novos recursos:
Tabelas de saída são tabelas temporárias somente leitura geradas por uma execução de notebook e compartilhadas com o metastore do Unity Catalog da execução do notebook.
As tabelas de saída podem ser criadas ou lidas por colaboradores no Azure, AWS e Google Cloud, mas são suportadas apenas quando a sala limpa central está hospedada na AWS.
Os tipos de tarefas de bloco de anotações de sala limpa permitem executar blocos de anotações do Azure Databricks em uma sala limpa como parte de um fluxo de trabalho. Juntamente com o suporte para valores de tarefas e tabelas de saída, esta é uma ferramenta poderosa para executar fluxos de trabalho complexos em dados compartilhados em salas limpas.
Controlo de saída sem servidor permite restringir o acesso de saída de salas limpas centralizadas para destinos na Internet que especifique.
Consulte O que é o Azure Databricks Clean Rooms?.
Databricks Runtime 16.0 é GA
11 de novembro de 2024
O Databricks Runtime 16.0 e o Databricks Runtime 16.0 ML estão agora disponíveis para o público em geral.
Consulte Databricks Runtime 16.0 e Databricks Runtime 16.0 para Machine Learning.
Mudança de rutura: O RStudio hospedado está em fim de vida útil
11 de novembro de 2024
No Databricks Runtime 16.0 e superior, o Servidor RStudio hospedado no Databricks está em fim de vida útil e indisponível em qualquer espaço de trabalho do Azure Databricks. Para saber mais e ver uma lista de alternativas ao RStudio, consulte Hosted RStudio Server deprecation.
Otimização preditiva habilitada para todas as novas contas do Azure Databricks
11 de novembro de 2024
Em 11 de novembro, o Databricks habilitou a otimização preditiva como padrão para todas as novas contas do Azure Databricks. Anteriormente, ele estava desativado por padrão e podia ser ativado através da sua conta de administrador. Quando a otimização preditiva está habilitada, o Azure Databricks executa automaticamente operações de manutenção para tabelas gerenciadas do Unity Catalog. Para obter mais informações sobre otimização preditiva, consulte Otimização preditiva para tabelas geridas pelo Unity Catalog.
Blocos de código somente leitura atualizados e unificados
8 de novembro de 2024
Um novo bloco de código só de leitura agora está disponível no Explorador de Catálogo, na página de alertas e no Genie.
Aumento das recomendações de Correção Rápida
8 de novembro de 2024
O Databricks Assistant Quick Fix agora identifica e sugere correções para uma gama mais ampla de erros comuns de SQL e Python. Com um aumento de 50% na deteção de erros, o Quick Fix pode ajudá-lo a depurar seu código mais rapidamente. Consulte Correção rápida.
Pagamento por token das APIs do Modelo de Base disponível em todas as regiões suportadas pelo Model Serving
7 de novembro de 2024
As cargas de trabalho de de pagamento por token das APIs do
Acesso controlado pelo catálogo Unity a serviços de nuvem externos usando credenciais de serviço (Visualização pública)
7 de novembro de 2024
As credenciais de serviço permitem uma autenticação simples e segura com os serviços do locatário de nuvem usando identidades gerenciadas do Azure (MI) e o Catálogo Unity. As credenciais de serviço estão em pré-visualização pública e são suportadas no Databricks Runtime 15.4 LTS e superior. Consulte Gerenciar o acesso a serviços de nuvem externos usando credenciais de serviço.
Controlos de conformidade do UK Cyber Essentials Plus
7 de novembro de 2024
Os controlos de conformidade do UK Cyber Essentials Plus (UKCE+) fornecem melhorias que o ajudam com a conformidade do seu espaço de trabalho. UKCE+ é uma certificação criada pelo governo do Reino Unido para simplificar e padronizar as práticas de segurança de TI para organizações comerciais que interagem com dados do governo do Reino Unido. Consulte os controles de conformidade do UK Cyber Essentials Plus.
Conectividade privada do suporte de computação sem servidor para serviço de modelo
5 de novembro de 2024
A conectividade privada da computação sem servidor usando o Azure Private Link agora é suportada para o serviço de modelo. Isso inclui suporte para pontos de extremidade de modelo personalizado e pontos de extremidade de taxa de transferência provisionados. Consulte Configurar conectividade privada a partir de computação sem servidor.
Termina o suporte da série Databricks Runtime 14.2
5 de novembro de 2024
O suporte para Databricks Runtime 14.2 e Databricks Runtime 14.2 para Machine Learning terminou em 5 de novembro. Consulte Ciclos de vida de suporte do Databricks.