Junho de 2023
Esses recursos e melhorias na plataforma Azure Databricks foram lançados em junho de 2023.
Nota
Os lançamentos são encenados. Seu espaço de trabalho do Azure Databricks pode não ser atualizado até uma semana ou mais após a data de lançamento inicial.
Databricks Terraform provedor atualizado para a versão 1.20.0
29 de junho de 2023
O provedor Databricks Terraform versão 1.20.0 adiciona suporte para o recurso Unity Catalog databricks_catalog_workspace_binding , melhora a exportação de usuários e grupos no nível da conta e muito mais. Para obter detalhes, consulte o changelog para a versão 1.20.0.
CLI do Databricks atualizada para a versão 0.200.1 (Visualização pública)
28 de junho de 2023
A CLI do Databricks versão 0.200.1 atualiza os fs ls comandos and fs cp , suporta arquivos locais como padrão para fs comandos, adiciona deteção de provedor ao repos create comando e muito mais. Para obter detalhes, consulte o changelog para a versão 0.200.1.
Databricks SDK for Go atualizado para a versão 0.12.0 (Beta)
28 de junho de 2023
O Databricks SDK for Go versão 0.12.0 adiciona suporte para parâmetros de nível de trabalho e definições de parâmetros, execução condicional de tarefas de trabalho e várias correções de bugs para outros serviços. Para obter detalhes, consulte o changelog para a versão 0.12.0.
Databricks SDK for Go atualizado para a versão 0.11.0 (Beta)
28 de junho de 2023
O Databricks SDK for Go versão 0.11.0 introduz várias alterações significativas nas APIs Go, incluindo dezenas de adições, renomeações e consolidações. Para obter detalhes, consulte o changelog para a versão 0.11.0.
Databricks SDK para Python (Beta)
28 de junho de 2023
O SDK do Databricks para Python agora está disponível como Beta. O SDK do Databricks para Python permite automatizar contas, espaços de trabalho e recursos do Azure Databricks executando código Python.
Consulte o SDK do Databricks para Python.
Databricks SDK para Go (Beta)
28 de junho de 2023
O Databricks SDK for Go agora está disponível como Beta. O SDK do Databricks para Go permite automatizar contas, espaços de trabalho e recursos do Azure Databricks executando o código Go.
Consulte o Databricks SDK for Go.
Acessar o log de auditoria, o uso faturável e as tabelas do sistema de linhagem (Visualização pública)
28 de junho de 2023
Os administradores de conta agora podem habilitar o acesso às tabelas do sistema nas contas do Azure Databricks. As tabelas do sistema são um repositório analítico hospedado pelo Azure Databricks dos dados operacionais de uma conta. As tabelas do sistema fornecem dados de observabilidade de toda a conta de fácil acesso.
Para obter mais informações, consulte Monitorar a atividade da conta com tabelas do sistema.
Modelos no Catálogo Unity (Visualização pública)
28 de junho de 2023
Agora você pode atualizar os fluxos de trabalho do Registro do Modelo MLflow para governar modelos por meio do Catálogo Unity. O Unity Catalog fornece controle de acesso centralizado, auditoria, linhagem, compartilhamento de modelos entre espaços de trabalho e melhores fluxos de trabalho de implantação de MLOps. O Databricks recomenda o uso de Modelos no Unity Catalog em vez do registro de modelo de espaço de trabalho existente, que será preterido no futuro. Consulte Gerenciar o ciclo de vida do modelo no Catálogo Unity para obter detalhes.
Databricks Marketplace agora é GA
27 de junho de 2023
Agora você pode usar o Databricks Marketplace para descobrir, acessar e implantar centenas de produtos de dados e notebooks dos principais provedores em seus fluxos de trabalho de IA e análise. Os destaques desde o início da prévia pública incluem novos provedores – incluindo Dun e Bradstreet, LexisNexis, Refinitiv (London Stock Exchange Group), YipitData e ZoomInfo – juntamente com a adição de bolsas privadas e gerenciamento simplificado de permissões do consumidor usando o USE_MARKETPLACE_ASSETS privilégio.
Consulte O que é o Databricks Marketplace?.
Databricks Runtime 13.2 (Beta)
26 de junho de 2023
O Databricks Runtime 13.2 e o Databricks Runtime 13.2 ML já estão disponíveis como versões Beta.
Consulte Databricks Runtime 13.2 (EoS) e Databricks Runtime 13.2 para Machine Learning (EoS).
Extensão Databricks para Visual Studio Code (disponibilidade geral)
26 de junho de 2023
A extensão Databricks para Visual Studio Code agora está disponível em geral. Conecte-se à lakehouse, execute depuração interativa e execute notebooks Jupyter, tudo sem sair do IDE. Use a navegação de código, a refatoração, a conclusão e a identificação de erros do IDE.
Consulte a extensão Databricks para Visual Studio Code.
Habilite chaves gerenciadas pelo cliente usando a CLI do Azure e o Powershell sem um modelo
23 de junho de 2023
Agora você pode habilitar chaves gerenciadas pelo cliente para serviços gerenciados e discos gerenciados usando a CLI do Azure e o Powershell sem usar um modelo. Isso já estava disponível para chaves gerenciadas pelo cliente para DBFS. Consulte Habilitar chaves gerenciadas pelo cliente para serviços gerenciados, Configurar chaves gerenciadas pelo cliente para discos gerenciados do Azure e Chaves gerenciadas pelo cliente para raiz DBFS.
Os armazéns SQL sem servidor funcionam com o Azure Private Link back-end habilitado
22 de junho de 2023
Habilitar o Azure Private Link back-end não impede mais que armazéns SQL sem servidor sejam iniciados. Os recursos de computação sem servidor não usam a conexão back-end do Azure Private Link se ela estiver habilitada. Consulte Habilitar armazéns SQL sem servidor e Habilitar conexões back-end e front-end do Azure Private Link.
Veja uma visão geral visual das execuções de trabalho concluídas na interface do usuário de Trabalhos do Azure Databricks
22 de junho de 2023
Uma interface do usuário aprimorada de Trabalhos do Azure Databricks fornece uma visão geral visual das execuções de trabalho concluídas, filtrável por status e tempo de execução, e uma lista dos erros de trabalho mais comuns. O filtro de tempo padrão cobre as 48 horas anteriores. Consulte Exibir execuções de trabalho recentes.
CLI do Databricks (Visualização pública)
21 de junho de 2023
A interface de linha de comando Databricks (Databricks CLI) passou por uma grande reformulação. A nova CLI abrange todas as operações da API REST do Databricks e dá suporte a todos os tipos de autenticação do Azure Databricks. Os usuários de macOS e Linux podem instalar a nova CLI com o Homebrew. O Windows também é suportado.
Paginação melhorada de resultados e List job runs solicitações de List all jobs API
14 de junho de 2023
Agora você pode usar o page_token parâmetro para paginar os resultados retornados das solicitações da API de trabalhos GET /api/2.1/jobs/list e GET /api/2.1/jobs/runs/list Jobs. Essa paginação baseada em token substitui os parâmetros e limit preteridos offset e melhora a escalabilidade do serviço para essas solicitações.
O navegador de espaço de trabalho de página inteira inclui Repos
14 de junho de 2023
A experiência do navegador de espaço de trabalho de página inteira agora se estende aos Repos. Você pode procurar conteúdo no Databricks Repos ao lado do conteúdo do seu espaço de trabalho clicando em Espaço de trabalho na barra lateral. Também pode procurar conteúdo a partir de um bloco de notas utilizando um navegador contextual. Para obter mais informações sobre o navegador de espaço de trabalho de página inteira, consulte Navegar no espaço de trabalho e no navegador de espaço de trabalho.
Databricks Terraform provedor atualizado para a versão 1.19.0
14 de junho de 2023
Databricks Terraform provider 1.19.0 adiciona run_as e run_as_user_name para databricks_job, adiciona mais atributos a databricks_cluster_policy, adiciona force_destroy a databricks_external_location, e muito mais. Para obter mais detalhes, consulte o changelog da versão 1.19.0.
Executar trabalhos como entidade de serviço (Pré-visualização Pública)
13 de junho de 2023
Agora você pode conceder permissões a usuários, entidades de serviço e grupos do Azure Databricks para usar uma entidade de serviço. Isso permite que os usuários executem trabalhos como a entidade de serviço, em vez de executar como a identidade do proprietário do trabalho, para evitar que os trabalhos falhem se um usuário sair da sua organização ou um grupo for modificado.
Consulte Funções para gerenciar entidades de serviço e Configurar identidade para execuções de tarefas.
A nova interface do usuário da entidade de serviço oferece melhor experiência de gerenciamento
13 de junho de 2023
Agora você pode usar a nova interface do usuário da entidade de serviço para gerenciar entidades de serviço em seu espaço de trabalho. A interface do usuário da entidade de serviço permite adicionar entidades de serviço ao seu espaço de trabalho, configurar direitos e gerenciar permissões da entidade de serviço. Veja Gerir principais de serviço.
Pastas base restauradas quando os usuários são adicionados novamente aos espaços de trabalho
9 de junho de 2023
Quando um administrador remove um usuário de um espaço de trabalho e, em seguida, o adiciona novamente, a pasta base do usuário agora é restaurada. Anteriormente, ao ser adicionado novamente ao espaço de trabalho, o usuário recebia uma nova pasta base vazia. Sua antiga pasta de início foi mantida como backup. Para obter mais informações sobre pastas de espaço de trabalho, consulte Organizar objetos de espaço de trabalho em pastas.
Databricks Marketplace: Bolsas privadas já estão disponíveis
7 de junho de 2023
Os intercâmbios privados permitem que os fornecedores de dados partilhem produtos de dados com um grupo selecionado de consumidores convidados. As listagens privadas aparecem na página inicial do Marketplace dos consumidores convidados, mas não aparecem no mercado público. Consulte Criar e gerenciar trocas privadas no Databricks Marketplace.
Databricks Marketplace: os consumidores podem desinstalar produtos de dados usando a interface do usuário
5 de junho de 2023
Os consumidores de dados agora podem desinstalar qualquer produto de dados usando a interface Minhas solicitações do Marketplace. Consulte Excluir produtos de dados instalados.
Databricks Marketplace: os fornecedores podem criar os seus próprios perfis
5 de junho de 2023
Os provedores de dados agora podem criar e atualizar seus próprios perfis, assim que o aplicativo do provedor for aprovado. Consulte Criar seu perfil de provedor do Marketplace.
Databricks Connect V2 é GA para Python
2 de junho de 2023
A partir do Databricks Runtime 13.1, o Databricks Connect agora está disponível para Python. Esta versão adiciona suporte para Structured Streaming, todos os recursos Delta e Pandas no Spark. Ele também inclui suporte para OAuth (Experimental), confiando no Databricks SDK incluído para Python.
Databricks Terraform provedor atualizado para a versão 1.18.0
2 de junho de 2023
O provedor Databricks Terraform 1.18.0 adiciona um databricks_volume recurso, databricks_model_serving suporte a databricks_permissionse muito mais. Para obter mais detalhes, consulte o changelog para a versão 1.18.0.
Novos fornecedores do Databricks Marketplace
1 de junho de 2023
Oito novos provedores publicaram listagens no Databricks Marketplace no último mês. Estes são, entre outros:
- IQVIA: Dados de saúde e ciências da vida.
- Morningstar: Investimento oferecendo dados e insights de pesquisa, como dados de classificação de risco ESG.
- Vaisala: Dados meteorológicos e ambientais.
- Sucali: Métricas de desempenho imobiliário para fundos de hedge e investidores.
- Veritas Data Research: Índice abrangente de dados de mortalidade dos EUA de 2010 até o presente.
- Collectors Data Store: Dados de cartões esportivos e comerciais para anunciantes e consumidores.
- Tego Cyber: Dados de cibersegurança e inteligência de ameaças
- Ribbon Health: Dados do prestador de cuidados de saúde.
Se você tiver dúvidas sobre esses provedores ou o Marketplace, entre em contato com dataconsumers@databricks.com. Consulte também O que é o Databricks Marketplace?.
Databricks Runtime 13.1 é GA
1 de junho de 2023
O Databricks Runtime 13.1 e o Databricks Runtime 13.1 ML estão agora disponíveis para o público em geral.
Consulte Databricks Runtime 13.1 (EoS) e Databricks Runtime 13.1 para Machine Learning (EoS).
Exibir dados de blocos de anotações, editor SQL e Gerenciador de Catálogos com o navegador de esquema unificado (Visualização Pública)
1 de junho de 2023
O novo navegador de esquema unificado permite visualizar todos os dados no metastore do Unity Catalog sem sair de um bloco de anotações ou do editor SQL. Pode selecionar Para limitar a vista apenas aos dados ativos que está a utilizar e aos seus favoritos.
Para obter detalhes sobre o Catalog Explorer, consulte Catalog Explorer.
Para obter informações sobre como aceder ao Explorador de Catálogos a partir de um bloco de notas, consulte Procurar dados.