Novembro de 2024
Esses recursos e aprimoramentos da plataforma Azure Databricks foram lançados em novembro de 2024.
Observação
As versões são disponibilizadas em fases. Talvez sua conta do Azure Databricks só seja atualizada em uma semana ou mais após a data de lançamento inicial.
A atualização automática do cluster e a interface do usuário aprimorada de segurança e conformidade estão em disponibilidade geral
19 de novembro de 2024
A atualização automática do cluster agora está em disponibilidade geral. A atualização automática do cluster garante que todos os clusters em um workspace sejam atualizados periodicamente para as atualizações de segurança e imagem do sistema operacional do host mais recentes. A capacidade de habilitar recursos aprimorados de segurança e conformidade no console da conta também está disponível para o público em geral. Consulte Atualização automática do cluster e Definir configurações aprimoradas de segurança e conformidade.
Suporte expandido para depurador Python em notebooks
18 de novembro de 2024
O depurador interno do Python em notebooks do Databricks agora tem suporte na computação sem servidor e na computação configurada com o modo de acesso compartilhado no Databricks Runtime 14.3 LTS ou superior. Para saber mais sobre o depurador, consulte Depurar notebooks.
Suporte ao histórico de consultas e ao perfil de consulta para tabelas dinâmicas delta
15 de novembro de 2024
O Azure Databricks agora oferece ferramentas aprimoradas para monitorar o desempenho da consulta em pipelines do Delta Live Tables. Consulte Acessar o histórico de consultas para pipelines do Delta Live Tables.
Reformulação da marca Mosaic AI Model Training
15 de novembro de 2024
O Mosaic AI Model Training foi renomeado para abranger os recursos existentes:
- O ajuste fino do modelo de fundação, anteriormente conhecido como Mosaic AI Model Training, continua a oferecer personalização avançada para modelos de fundação.
- Os recursos do AutoML agora podem ser acessados na seção Experimentos .
Reutilizar saídas SQL como _sqldf em células SQL subsequentes
15 de novembro de 2024
No Databricks Runtime 14.3 e superior, a execução de uma consulta SQL em um notebook do Databricks gera um DataFrame (_sqldf) implícito que você pode usar em células SQL downstream. Isso aumenta o suporte para usar a _sqldf variável em células Python introduzidas no Databricks Runtime 13.3. Consulte Explorar resultados de células SQL.
Conectividade privada do suporte de computação sem servidor para recursos gerenciados pelo Azure
15 de novembro de 2024
Todos os recursos gerenciados pelo Azure com suporte nativo ao ponto de extremidade privado agora têm suporte da computação sem servidor. Esse recurso está em disponibilidade geral. Confira Configurar a conectividade privada por meio da computação sem servidor.
Suporte de conectividade privada para trabalhos, notebooks e Delta Live Tables
15 de novembro de 2024
A conectividade privada para computação sem servidor agora dá suporte a trabalhos, notebooks e cargas de trabalho do Delta Live Tables. Esse recurso está em disponibilidade geral. Confira Configurar a conectividade privada por meio da computação sem servidor.
A tabela do sistema de depósitos agora está disponível (Visualização Pública)
15 de novembro de 2024
A system.compute.warehouses tabela registra as configurações do SQL warehouse. Cada linha é um instantâneo das propriedades de um SQL warehouse em um ponto específico no tempo. Um novo instantâneo é criado quando as propriedades são alteradas. Consulte Referência da tabela do sistema de depósitos.
Compartilhamento de exibição multiplataforma (Visualização Pública)
14 de novembro de 2024
Os destinatários do Databricks agora podem consultar exibições compartilhadas usando qualquer recurso de computação do Databricks. Anteriormente, se a conta do Azure Databricks de um destinatário fosse diferente da conta do provedor, os destinatários só poderiam consultar uma exibição compartilhada usando um SQL warehouse sem servidor. Consulte Ler exibições compartilhadas.
O compartilhamento de exibição agora também se estende a conectores de compartilhamento abertos. Confira Leitura do compartilhamento de dados usando o compartilhamento aberto do Delta Sharing (para destinatários).
A visualização pública de Salas Limpas não foi cancelada, com novos recursos
13 de novembro de 2024
O Databricks Clean Rooms usam o Delta Sharing e a computação sem servidor para fornecer um ambiente seguro e de proteção de privacidade, em que várias partes podem compartilhar dados corporativos confidenciais e colaborar sem acesso direto aos dados uns dos outros. A visualização pública de Salas Limpas agora está aberta a todos os clientes no Azure e na AWS e inclui os seguintes novos recursos:
As tabelas de saída são tabelas somente leitura temporárias geradas por uma execução de notebook e compartilhadas com o metastore do Catálogo do Unity do executor do notebook.
As tabelas de saída podem ser criadas ou lidas por colaboradores no Azure, AWS e Google Cloud, mas são suportadas apenas quando o clean room central está hospedado no AWS.
Os tipos de tarefa de notebook de sala limpa permitem que você execute notebooks do Azure Databricks em uma sala limpa como parte de um fluxo de trabalho. Juntamente com o suporte para valores de tarefas e tabelas de saída, esta é uma ferramenta poderosa para executar fluxos de trabalho complexos em dados compartilhados em salas limpas.
Confira O que é o Azure Databricks Clean Rooms?.
O Databricks Runtime 16.0 está em disponibilidade geral
11 de novembro de 2024
O Databricks Runtime 16.0 e o Databricks Runtime 16.0 ML já estão em disponibilidade geral.
Confira Databricks Runtime 16.0 e Databricks Runtime 16.0 para Machine Learning.
Alteração significativa: o RStudio hospedado está no fim da vida útil
11 de novembro de 2024
No Databricks Runtime 16.0 e superior, o RStudio Server hospedado no Databricks está no fim da vida útil e indisponível em qualquer workspace do Azure Databricks. Para saber mais e ver uma lista de alternativas ao RStudio, consulte Substituição do RStudio Server hospedado.
Otimização preditiva habilitada para todas as novas contas do Azure Databricks
11 de novembro de 2024
Em 11 de novembro, o Databricks habilitou a otimização preditiva como padrão para todas as novas contas do Azure Databricks. Anteriormente, ele era desabilitado por padrão e podia ser habilitado por meio de sua conta de administrador. Quando a otimização preditiva está habilitada, o Azure Databricks executa automaticamente operações de manutenção para tabelas gerenciadas do Catálogo do Unity. Para obter mais informações sobre otimização preditiva, consulte Otimização preditiva para tabelas gerenciadas do Catálogo do Unity.
Blocos de código somente leitura atualizados e unificados
8 de novembro de 2024
Um novo bloco de código somente leitura agora está disponível no Explorador de Catálogos, na página de alertas e no Genie.
Recomendações de Correção Rápida aumentadas
8 de novembro de 2024
A Correção Rápida do Assistente do Databricks agora identifica e sugere correções para uma gama mais ampla de erros comuns de SQL e Python. Com um aumento de 50% na detecção de erros, o Quick Fix pode ajudá-lo a depurar seu código mais rapidamente. Consulte Correção rápida.
Pagamento por token das APIs do Modelo de Base disponíveis em todas as regiões compatíveis com o Serviço de Modelos
7 de novembro de 2024
As cargas de trabalho de pagamento por token das APIs do Foundation Model agora são compatíveis em todas as regiões em que o Mosaic AI Model Serving está disponível. Se o workspace estiver em uma região de Serviço de Modelo, mas não em uma região dos EUA ou da UE, ele deverá estar habilitado para processamento de dados entre áreas geográficas. Quando ativada, sua carga de trabalho de pagamento por token é roteada para os EUA. Databricks Geo.
Acesso controlado pelo Catálogo do Unity a serviços de nuvem externos usando credenciais de serviço (Visualização Pública)
7 de novembro de 2024
As credenciais de serviço permitem a autenticação simples e segura com os serviços do locatário de nuvem usando as MI (identidades gerenciadas) do Azure e o Catálogo do Unity. As credenciais de serviço estão em visualização pública e têm suporte no Databricks Runtime 15.4 LTS e superior. Consulte Gerenciar o acesso a serviços de nuvem externos usando credenciais de serviço.
Controles de conformidade do UK Cyber Essentials Plus
7 de novembro de 2024
Os controles de conformidade do UK Cyber Essentials Plus (UKCE+) fornecem aprimoramentos que ajudam você na conformidade do seu espaço de trabalho. UKCE+ é uma certificação criada pelo governo do Reino Unido para simplificar e padronizar as práticas de segurança de TI para organizações comerciais que interagem com dados do governo do Reino Unido. Consulte os controles de conformidade do UK Cyber Essentials Plus.
Conectividade privada do suporte de computação sem servidor para serviço de modelo
5 de novembro de 2024
A conectividade privada da computação sem servidor usando o Link Privado do Azure agora tem suporte para o serviço de modelo. Isso inclui suporte para endpoints de modelo personalizado e endpoints de taxa de transferência provisionada. Confira Configurar a conectividade privada por meio da computação sem servidor.
O suporte do Databricks Runtime série 14.2 termina
5 de novembro de 2024
O suporte para Databricks Runtime 14.2 e Databricks Runtime 14.2 para Machine Learning terminou em 5 de novembro. Consulte ciclos de vida de suporte do Databricks.