Partilhar via

junho de 2024

  • Artigo

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em junho de 2024.

Nota

Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.

Blocos de notas - realce de sintaxe fora de ordem

16 de junho de 2024

O destaque de erro de sintaxe Python em blocos de anotações agora avisa os usuários quando as variáveis são usadas antes de serem declaradas e sugere uma correção.

O Assistente de Blocos de Notas diagnostica automaticamente erros

16 de junho de 2024

O Assistente Databricks agora diagnostica automaticamente erros de código em blocos de anotações. Isso usa IA generativa para analisar seu código e a mensagem de erro para sugerir uma correção diretamente em seu notebook. Para saber mais, consulte Usar o Assistente Databricks

Melhorias no Catalog Explorer

Junho 28, 2024

As seguintes melhorias foram feitas no Catalog Explorer:

  • Adicionada uma seção de acesso rápido que exibe objetos recentes do Unity Catalog, objetos favoritos do Unity Catalog e catalogs e esquemas para navegação.

  • Foi removida a barra superior e a estrutura de acordeão; os pontos de entrada para os seguintes foram movidos para um menu com ícone de engrenagem na barra lateral com o navegador schema, para uma navegação mais simples.

    • Seleção de computação
    • Compartilhamento Delta
    • Armazenamento credentials
    • Localizações externas
    • Connections
    • Procurar DBFS

    Você também pode acessar Partilha Delta e Dados externos na parte superior do Catalog Explorer, acima da seção de acesso rápido.

Sirva vários modelos externos a partir de um único modelo de ponto de extremidade de serviço

Junho 27, 2024

O Mosaic AI Model Serving agora suporta o atendimento de vários modelos externos por modelo que serve o ponto de extremidade. Consulte Servir vários modelos externos a um ponto de extremidade.

Databricks Assistant agora é GA

Junho 27, 2024

Databricks Assistant é lançado como GA. Os recursos do assistente incluem:

  • Generate, depurar, optimizee explain código.
  • Crie visualizações a partir de dados. Consulte Criar visualizações com o Databricks Assistant.
  • Depurar trabalhos (recurso de visualização pública).
  • Codifique e edite consultas SQL.
  • Encontre ajuda relevante na documentação e na base de dados de conhecimento do Azure Databricks.

Para obter mais informações, consulte O que é o Databricks Assistant?.

Databricks Assistant agora dá títulos a threads

Junho 27, 2024

Para navegar mais facilmente pelos threads de ajuda, o Assistente Databricks intitula os threads com base no contexto do prompt.

Consulte Usar o Assistente Databricks.

Gerenciador de ambiente de notebooks sem servidor

Junho 27, 2024

Agora você pode instalar dependências Python para blocos de anotações sem servidor usando o painel lateral Ambiente, que fornece um único local para editar, visualizar e exportar os requisitos de biblioteca para um bloco de anotações. Consulte Instalar dependências do bloco de anotações.

Console de depuração de notebooks

Junho 27, 2024

Com o console de depuração do notebook , agora pode inspecionar variáveis ao vivo values e executar fragmentos de código durante uma sessão de depuração do notebook.

Adicione rapidamente uma agenda periódica a um fluxo de trabalho do Azure Databricks

Junho 28, 2024

Agora você pode adicionar uma agenda simples a um fluxo de trabalho do Azure Databricks especificando apenas um intervalo e uma unidade de tempo (por exemplo, execute o fluxo de trabalho a cada 4 horas). Este novo tipo de agenda complementa o tipo de agenda avançada existente, permitindo que você adicione uma agenda com apenas alguns cliques. Consulte Executar trabalhos em uma agenda.

Databricks Runtime 15.3 é GA

24 de junho de 2024

O Databricks Runtime 15.3 e o Databricks Runtime 15.3 ML estão agora disponíveis para o público em geral.

Consulte Databricks Runtime 15.3 e Databricks Runtime 15.3 para Machine Learning.

Azure Geographies é GA

24 de junho de 2024

O Azure Geographies agora está disponível para o público em geral. O Azure Geographies gerencia a residência de dados ao processar conteúdo do cliente para alguns recursos de IA.

Para obter mais informações, consulte Databricks Designated Services.

Nova interface de criação de catalog melhorada

18 de junho de 2024

A nova interface de criação de catalog guia-o passo a passo por todo o processo de criação e configuração de um catalog, fornecendo prompts úteis e separando as configurações necessárias das opcionais. Você pode usar a mesma interface do usuário para criar catalogspadrão, compartilhada e estrangeira.

Catalog UI de criação passo a passo

Consulte Criar catalogs.

Atualizações para sub-redes em configurações de conectividade de rede

18 de junho de 2024

O Databricks está atualizando as sub-redes em configurações de conectividade de rede (NCCs) em todas as regiões. As novas IDs de sub-rede são adicionadas automaticamente às regras de firewall existentes do Armazenamento do Azure que permitem o acesso a partir das IDs de sub-rede existentes para garantir o acesso ininterrupto a partir do Azure Databricks.

Se você usar a API de Configurações de Conectividade de Rede para get as IDs de sub-rede e adicioná-las às regras de rede de armazenamento para novas contas de Armazenamento do Azure, não sofrerá interrupções. No entanto, se definires diretamente o set existente de IDs de sub-rede, poderás enfrentar interrupções. A Databricks recomenda o uso da API para obter as informações mais recentes. Consulte a API de configurações de conectividade de rede.

Poderá experienciar um período de inatividade para a API de configurações de conectividade de rede enquanto este update ocorre entre as 20:00 e as 00:00 PDT em 20 de junho de 2024.

O sistema de cobrança tables está habilitado por padrão

18 de junho de 2024

O system.billingschema agora está habilitado por padrão em todos os espaços de trabalho do Unity Catalog. Consulte o sistema de utilização faturável referência table.

Lakehouse Monitoring é GA

13 de junho de 2024

Databricks Lakehouse Monitoring está agora disponível para o público em geral.

O compartilhamento de volume usando o Delta Sharing agora está disponível para o público em geral

13 de junho de 2024

O suporte do Delta Sharing para compartilhar dados não tabulares como um volume agora é GA. Você pode compartilhar volumes entre espaços de trabalho do Databricks em diferentes CatalogUnitymetastores (incluindo aqueles em contas Databricks distintas e em diversas nuvens).

Volumes são objetos Unity Catalog que representam um volume lógico de armazenamento em um local de armazenamento de objetos na nuvem. Destinam-se principalmente a fornecer governança sobre ativos de dados não tabulares. O Delta Sharing on Databricks fornece uma integração nativa com o Unity Catalog que permite gerenciar, governar, auditar e rastrear o uso de dados de volumes compartilhados.

Consulte Adicionar volumes a um compartilhamento.

As chaves gerenciadas pelo cliente (CMK) para a Pesquisa Vetorial Databricks agora são GA

Junho 12, 2024

As chaves gerenciadas pelo cliente (CMK) em pontos de extremidade de pesquisa vetorial agora estão disponíveis ao público em geral.

Mosaic AI Agent Framework (Visualização pública)

Junho 12, 2024

O Mosaic AI Agent Framework é uma set de ferramentas no Databricks projetada para ajudar os desenvolvedores a criar, implantar e avaliar aplicativos de geração aumentada de recuperação (RAG) com qualidade de produção. O Agent Framework permite ao utilizador criar ou optimize aplicativos LLM numa única plataforma usando os seus próprios dados.

O Agent Framework inclui os seguintes recursos:

  • Crie e registre agentes e cadeias.
  • Parametrize agentes e cadeias para experimentar e iterar rapidamente.
  • Métricas integradas para comparar execuções na recuperação de documentos relevantes, precisão de resposta e custo e latência.
  • Juízes LLM personalizados para recuperação e precisão de resposta.
  • Implante aplicativos de IA com registro automatizado de solicitações e respostas.
  • Aplicativo de revisão integrado para get o feedback dos usuários.
  • Avaliação de agentes para avaliar a qualidade, latência e custo de aplicações generativas de IA.
  • MLflow Tracing para analisar e comparar rastreamentos na execução de código.

Para obter detalhes, consulte RAG (Retrieval Augmented Generation) no Azure Databricks.

A otimização preditiva agora é GA

Junho 11, 2024

A otimização preditiva para Unity Catalogtables gerenciados agora está disponível ao público em geral. A otimização preditiva agora executa OPTIMIZE em tables com agrupamento líquido ativado para aplicar agrupamento. Consulte otimização preditiva gerenciada para Unity Catalogtables.

A otimização de rotas está disponível para servir pontos finais

Junho 11, 2024

Agora você pode criar pontos de extremidade de serviço otimizados de rota para seus fluxos de trabalho de serviço de modelo ou de serviço de recursos. Consulte Configurar otimização de rota em pontos de extremidade de serviço.

Suporte de serviço de modelo com um firewall de conta de armazenamento de espaço de trabalho

Junho 11, 2024

O Serviço de Modelo agora é suportado com suporte de firewall para a conta de armazenamento do espaço de trabalho. Consulte Ativar suporte de firewall para sua conta de armazenamento de espaço de trabalho.

** O mapeamento Column está agora disponível ao público.

10 de junho de 2024

O mapeamento do Delta Lake column está agora disponível para o público em geral. Agora pode usar DROP FEATURE para desativar o mapeamento de column e rebaixar o protocolo table. Veja Renomeie e elimine columns com o mapeamento Delta Lake column.

Os sistemas de fluxo de trabalho tables já estão disponíveis (Pré-visualização Pública)

10 de junho de 2024

O system.lakeflowschema contém quatro novos tables que pode utilizar para monitorizar tarefas na sua conta. Consulte sistema Jobs table referência.

Se não tiver acesso ao sistema tables, certifique-se de que ativou o system.lakeflowschema na sua conta. Consulte Ativar esquemas do sistema table.

A chamada de função é Visualização Pública

10 de junho de 2024

A chamada de função está agora disponível na Pré-visualização Pública. Essa funcionalidade está disponível usando modelos de pagamento por token das APIs do Modelo de Fundação: DBRX Instruct e Meta-Llama-3-70B-Instruct. Consulte Chamada de função no Azure Databricks.

10 de junho de 2024

AI Functions agora suporta vector_search() o que permite que você consulte um índice Mosaic AI Vetor Search usando SQL. Consulte vetor_search função.

7 de junho de 2024

O Mosaic AI Vetor Search agora suporta pesquisa híbrida de semelhança de palavras-chave, que combina pesquisa de incorporação baseada em vetor com técnicas tradicionais de pesquisa baseadas em palavras-chave. Essa abordagem corresponde a palavras exatas na consulta e, ao mesmo tempo, usa uma pesquisa de semelhança baseada em vetor para capturar as relações semânticas e o contexto da consulta. Ao integrar estas duas técnicas, a pesquisa híbrida de semelhança de palavras-chave recupera documentos que contêm não só as palavras-chave exatas, mas também aquelas que são conceptualmente semelhantes, fornecendo resultados de pesquisa mais abrangentes e relevantes. Para obter detalhes, consulte Mosaic AI Vetor Search.

GTE agora é suportado no Model Serving

7 de junho de 2024

O Mosaic AI Model Serving agora suporta General Text Embedding (GTE), um modelo de incorporação de texto que pode mapear texto para um vetor de incorporação. O GTE é suportado como parte das APIs do Modelo de Fundação e está disponível em regiões de ponto de extremidade de serviço de pagamento por token. Consulte Usar APIs de modelo básico.

Assistente Databricks: Experiência de consultas de threads e consultas habilitada por padrão

6 de junho de 2024

O Databricks Assistant (Visualização Pública) agora rastreia threads de consulta e histórico em todos os contextos do editor em sua experiência de sessão por padrão. Você pode gerenciar a ativação para todos os espaços de trabalho em uma conta ou espaços de trabalho individuais.

Para obter mais informações, consulte O que é o Databricks Assistant?

Editor de Markdown de bloco de notas melhorado

5 de junho de 2024

Agora você pode ver uma visualização ao vivo de suas células de Markdown em blocos de anotações e acessar uma barra de ferramentas para elementos comuns de Markdown, como cabeçalhos, listas e links. Passe mais tempo comunicando suas ideias e menos tempo lembrando a sintaxe.

Aceda rapidamente ao Catalog Explorer tables nos blocos de notas

5 de junho de 2024

Agora podes aceder facilmente ao Catalog Explorer tables diretamente a partir de cadernos. Passe o cursor sobre um nome de table numa célula do notebook para get um link para a página do explorador de catalog e ver detalhes como columns, permissões e muito mais.

Databricks driver ODBC 2.8.2

4 de junho de 2024

Databricks ODBC Driver (download) versão 2.8.2 já está disponível. Esta versão adiciona os seguintes novos recursos e aprimoramentos:

  • Os clientes agora podem usar os comandos estendidos SQL PUT, GETe REMOVE para ingerir e gerenciar grandes conjuntos de dados no Unity Catalogvolumes.
  • A configuração padrão OAuth values agora está atualizada e em conformidade. As opções de configuração atualizadas incluem o ponto de extremidade de autorização, a ID do cliente OAuth, o escopo de usuário para máquina do OAuth e o escopo de máquina para máquina do OAuth. Para obter mais detalhes, consulte as notas de versão.
  • Bibliotecas de terceiros foram atualizadas, incluindo expat 2.6.2 (anteriormente 2.6.0) e libCURL 8.7.1 (anteriormente 8.6.0).
  • O driver agora aceita uma autoridade de certificação (CA) privada assinada se ela for adicionada ao armazenamento de certificados da CA raiz confiável do Windows.

Esta versão também corrige os seguintes problemas:

  • O cliente retornou anteriormente um erro se o comprimento de um comentário table excedesse MaxCommentLen. O comportamento padrão agora trunca o comentário table para estar em conformidade com o limit especificado em MaxCommentLen.
  • O cliente retornou anteriormente um erro ao emitir SQLCancel em determinadas circunstâncias.

A nova interface do usuário do Databricks Notebook agora está disponível para o público em geral

4 de junho de 2024

A nova interface do usuário do Databricks Notebooks oferece aos desenvolvedores uma experiência de criação simplificada e focada em dados. As principais funcionalidades incluem:

  • UX moderna: desfrute de uma experiência de codificação simplificada com uma interface do usuário atualizada e outros recursos para aprimorar a organização do Notebook.
  • Novos resultados table: Realize a exploração de dados sem código com capacidades de pesquisa e filtragem diretamente nos resultados.