Novembro de 2024
Esses recursos e melhorias na plataforma Azure Databricks foram lançados em novembro de 2024.
Nota
Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.
Metadados adicionais para a dica de ferramenta table em blocos de anotações
25 de novembro de 2024
Quando você passa o mouse sobre o nome de um Catalogtable Unity em uma célula do bloco de anotações, a dica de ferramenta agora inclui os seguintes metadados:
- Proprietário
- Última atualização
- Tamanho
- Descrição
- Um link para exibir o table no painel lateral do Catalog Explorer
A cluster automático update e a interface de utilizador melhorada para segurança e conformidade estão agora disponíveis em geral.
19 de novembro de 2024
O cluster automático update agora está disponível para o público em geral. O cluster automático update garante que todos os clusters num espaço de trabalho sejam atualizados periodicamente para a imagem mais recente do sistema operativo do anfitrião e as atualizações de segurança mais recentes. A capacidade de habilitar recursos aprimorados de segurança e conformidade no console da conta também está agora disponível ao público em geral. Consulte o cluster automático update e configure as definições avançadas de segurança e conformidade .
Suporte expandido para depurador Python em notebooks
18 de novembro de 2024
O depurador Python integrado em notebooks Databricks agora é suportado em computação sem servidor e computação configurada com modo de acesso compartilhado no Databricks Runtime 14.3 LTS ou superior. Para saber mais sobre o depurador, consulte Depurar blocos de anotações.
Experiência melhorada no terminal Web
18 de novembro de 2024
A Databricks fez as seguintes melhorias na experiência do terminal web:
- Suporte para arquivos de configuração: Agora você pode set configurações persistentes para seu terminal da Web Databricks com arquivos de configuração .bashrc. Consulte Configurar o seu terminal da Web.
- Histórico do ciclo de comandos: Agora você pode percorrer comandos executados em sessões anteriores com as teclas de seta "Para cima" e "Para baixo". Isso facilita a recuperação e reutilização de comandos anteriores sem digitá-los novamente.
- Suporte a clusters compartilhados: Nosso terminal da Web aprimorado está disponível em clusters compartilhados no Databricks Runtime 15.1 e superior.
Para saber mais sobre como usar o terminal Web, consulte Executar comandos de shell no terminal Web do Azure Databricks.
Histórico de consultas e suporte de perfil de consulta para o Delta Live Tables
15 de novembro de 2024
O Azure Databricks agora oferece ferramentas aprimoradas para monitorar o desempenho da consulta em pipelines do Delta Live Tables. Consulte histórico de consultas do Access para pipelines do Delta Live Tables.
Rebranding do Mosaic AI Model Training
15 de novembro de 2024
O Mosaic AI Model Training foi renomeado para abranger os recursos existentes:
- O Foundation Model Fine-tuning, anteriormente conhecido como Mosaic AI Model Training, continua a oferecer personalização avançada para modelos de fundação.
- Os recursos do AutoML agora podem ser acessados na seção Experimentos .
Reutilizar saídas SQL como _sqldf em células SQL subsequentes
15 de novembro de 2024
No Databricks Runtime 14.3 e superior, a execução de uma consulta SQL em um bloco de anotações Databricks gera um DataFrame implícito (_sqldf) que você pode usar em células SQL downstream. Isso aumenta o suporte para usar a _sqldf variável em células Python introduzido no Databricks Runtime 13.3. Consulte Explorar resultados de células SQL.
Conectividade privada do suporte de computação sem servidor para recursos gerenciados pelo Azure
15 de novembro de 2024
Todos os recursos gerenciados pelo Azure com suporte de ponto de extremidade privado nativo agora são suportados pela computação sem servidor. Este recurso está disponível em geral. Consulte Configurar conectividade privada a partir de computação sem servidor.
Suporte de conectividade privada para trabalhos, notebooks e Delta Live Tables
15 de novembro de 2024
A conectividade privada para computação sem servidor agora suporta trabalhos, notebooks e cargas de trabalho do Delta Live Tables. Este recurso está disponível em geral. Consulte Configurar conectividade privada a partir de computação sem servidor.
Sistema de armazéns table já está disponível (Visualização pública)
15 de novembro de 2024
O system.compute.warehousestable registra as configurações do SQL warehouse. Cada linha é um instantâneo das propriedades de um SQL warehouse em um ponto específico no tempo. Um novo instantâneo é criado quando as propriedades são alteradas. Consulte sistema de armazéns table referência.
Partilha de vistas entre plataformas (Pré-visualização Pública)
14 de novembro de 2024
Databricks recipients agora pode consultar views partilhadas usando qualquer recurso de computação Databricks. Anteriormente, se a conta do Azure Databricks de um destinatário fosse diferente da conta do provedor, recipients só poderia consultar uma exibição compartilhada usando um SQL warehouse sem servidor. Consulte e leia viewspartilhada.
O compartilhamento de exibição agora também se estende a conectores de compartilhamento abertos. Consulte Ler dados compartilhados usando o compartilhamento aberto do Delta Sharing (para recipients).
A pré-visualização pública das Salas Limpas não está disponível, com novas funcionalidades
13 de novembro de 2024
O Databricks Clean Rooms usa o Delta Sharing e a computação sem servidor para fornecer um ambiente seguro e que protege a privacidade where várias partes podem compartilhar dados corporativos confidenciais e colaborar sem acesso direto aos dados uns dos outros. A visualização pública do Clean Rooms agora está aberta a todos os clientes no Azure e na AWS e inclui os seguintes novos recursos:
tables de saída são tables somente leitura temporárias geradas por uma execução de notebook e compartilhadas com o metastore Unity Catalog do executor de notebook.
O fluxo de saída tables pode ser criado ou lido por colaboradores no Azure, AWS e Google Cloud, mas é suportado somente quando a sala limpa central está alojada na AWS.
Os tipos de tarefas de bloco de anotações de sala limpa permitem executar blocos de anotações do Azure Databricks em uma sala limpa como parte de um fluxo de trabalho. Juntamente com o suporte para a tarefa values e a saída tables, esta é uma ferramenta poderosa para executar fluxos de trabalho complexos em dados compartilhados nas salas limpas.
Controlo de saída sem servidor permite restringir o acesso de saída de salas limpas centralizadas para destinos na Internet que especifique.
Consulte O que é o Azure Databricks Clean Rooms?.
Databricks Runtime 16.0 é GA
11 de novembro de 2024
O Databricks Runtime 16.0 e o Databricks Runtime 16.0 ML estão agora disponíveis para o público em geral.
Consulte Databricks Runtime 16.0 e Databricks Runtime 16.0 para Machine Learning.
Mudança de rutura: O RStudio hospedado está em fim de vida útil
11 de novembro de 2024
No Databricks Runtime 16.0 e superior, o Servidor RStudio hospedado no Databricks está em fim de vida útil e indisponível em qualquer espaço de trabalho do Azure Databricks. Para saber mais e ver uma list de alternativas ao RStudio, consulte Hosted RStudio Server deprecation.
Otimização preditiva habilitada para todas as novas contas do Azure Databricks
11 de novembro de 2024
Em 11 de novembro, o Databricks habilitou a otimização preditiva como padrão para todas as novas contas do Azure Databricks. Anteriormente, ele estava desativado por padrão e podia ser ativado através da sua conta de administrador. Quando a otimização preditiva está habilitada, o Azure Databricks executa automaticamente operações de manutenção para o Unity Catalog gerenciado tables. Para obter mais informações sobre otimização preditiva, consulte Predictive optimization for Unity Catalog managed tables.
Blocos de código somente leitura atualizados e unificados
8 de novembro de 2024
Um novo bloco de código somente leitura agora está disponível no Catalog Explorer, na página de alertas e no Genie.
Aumento das recomendações de Correção Rápida
8 de novembro de 2024
O Databricks Assistant Quick Fix agora identifica e sugere correções para uma gama mais ampla de erros comuns de SQL e Python. Com um aumento de 50% na deteção de erros, o Quick Fix pode ajudá-lo a depurar seu código mais rapidamente. Consulte Correção rápida.
Pagamento por token das APIs do Modelo de Base disponível em todas as regiões suportadas pelo Model Serving
7 de novembro de 2024
As cargas de trabalho de de pagamento por token das APIs do
Unity Catalog- acesso controlado a serviços de nuvem externos governado pelo serviço credentials (Pré-visualização pública)
7 de novembro de 2024
O Serviço credentials permite a autenticação simples e segura com os serviços do locatário de nuvem, usando identidades geridas do Azure (MI) e Unity Catalog. O serviço credentials está em pré-visualização pública e é suportado no Databricks Runtime 15.4 LTS e em versões posteriores. Consulte Gerenciar o acesso a serviços de nuvem externos usando o serviço credentials.
Controlos de conformidade do UK Cyber Essentials Plus
7 de novembro de 2024
Os controlos de conformidade do UK Cyber Essentials Plus (UKCE+) fornecem melhorias que o ajudam com a conformidade do seu espaço de trabalho. UKCE+ é uma certificação criada pelo governo do Reino Unido para simplificar e padronizar as práticas de segurança de TI para organizações comerciais que interagem com dados do governo do Reino Unido. Consulte os controles de conformidade do UK Cyber Essentials Plus.
Conectividade privada do suporte de computação sem servidor para serviço de modelo
5 de novembro de 2024
A conectividade privada da computação sem servidor usando o Azure Private Link agora é suportada para o serviço de modelo. Isso inclui suporte para pontos de extremidade de modelo personalizado e pontos de extremidade de taxa de transferência provisionados. Consulte Configurar conectividade privada a partir de computação sem servidor.
Termina o suporte da série Databricks Runtime 14.2
5 de novembro de 2024
O suporte para Databricks Runtime 14.2 e Databricks Runtime 14.2 para Machine Learning terminou em 5 de novembro. Consulte Ciclos de vida de suporte do Databricks.