Notes de publication de la plateforme Azure Databricks
- Novembre 2024
- La mise à jour automatique du cluster et l’interface utilisateur de sécurité et de conformité améliorées sont généralement disponibles
- Prise en charge étendue du débogueur Python dans les notebooks
- Prise en charge de l’historique des requêtes et du profil de requête pour Delta Live Tables
- Mosaïque AI Model Training rebrand
- Réutiliser les sorties SQL comme
_sqldf
dans les cellules SQL suivantes - Connectivité privée à partir de la prise en charge du calcul serverless pour les ressources gérées par Azure
- Prise en charge de la connectivité privée pour les travaux, les notebooks et les tables dynamiques Delta
- La table système des entrepôts est désormais disponible (préversion publique)
- Partage d’affichage multiplateforme (préversion publique)
- La préversion publique des salles propres est non contrôlée, avec de nouvelles fonctionnalités
- Databricks Runtime 16.0 est en disponibilité générale
- Changement cassant : Hosted RStudio est en fin de vie
- Optimisation prédictive activée pour tous les nouveaux comptes Azure Databricks
- Blocs de code en lecture seule mis à jour et unifiés
- Recommandations sur les correctifs rapides accrus
- API de modèle Foundation disponible dans toutes les régions prises en charge par modèle
- Accès géré par le catalogue Unity aux services cloud externes à l’aide des informations d’identification du service (préversion publique)
- Contrôles de conformité Uk Cyber Essentials Plus
- Connectivité privée à partir de la prise en charge du calcul serverless pour le service de modèle
- Fin de la prise en charge de la série Databricks Runtime 14.2
- Octobre 2024
- Activer l’attribution des coûts du contrôle d’accès affiné sur le calcul d’un seul utilisateur
- L’Assistant Databricks permet d’optimiser les requêtes SQL
- Fin de la prise en charge de la série Databricks Runtime 15.1
- Mise hors service du modèle De conversation Llama 2 70B dans les API de modèle Foundation Model pay-per token
- Permettre à un metastore d’être attribué automatiquement aux nouveaux espaces de travail
- Sorties structurées prises en charge sur mosaïque AI Model Service (préversion publique)
- Le contrôle d’accès affiné sur le calcul d’un seul utilisateur est généralement disponible
- Ai Functions est désormais disponible dans les régions de l’UE
- Utilisation serverless d’attribut avec des stratégies budgétaires (préversion publique)
- Calcul serverless activé automatiquement sur les comptes éligibles
- La saisie semi-automatique de l’Assistant Databricks est désormais en disponibilité générale
- Les filtres sur les tables de résultats du notebook sont désormais conservés
- Améliorations apportées aux commentaires dans les notebooks
- Databricks Runtime 16.0 (bêta)
- Mosaïque AI Model Service prend désormais en charge l’inférence par lots
- Créer des données sécurisées et des applications IA pour vos utilisateurs avec Databricks Apps (préversion publique)
- Rechargement plus fiable des modules Python modifiés avec des améliorations apportées
autoreload
- Simplification du connecteur d’ingestion Salesforce
- Calcul serverless maintenant disponible dans d’autres régions
- Septembre 2024
- Meta Llama 3.1 405B Instruct désormais pris en charge sur l’appel de fonction Databricks
vector_search()
est désormais disponible pour tous les clients (préversion publique)- Les modèles Meta Llama 3.2 3B et 1B sont pris en charge dans le service de modèles
- Les modèles Meta Llama 3.2 3B et 1B sont pris en charge dans le réglage fin du modèle foundation
- La publication sur Power BI est généralement disponible
- Utilisation de
@
pour référencer des tables dans les invites de l’Assistant Databricks - Prototypage et exportation d’agents d’IA générative appelant des outils dans AI Playground
- Contrôler l’accès externe aux données dans le catalogue Unity à l’aide du nouveau privilège
EXTERNAL USE SCHEMA
- Les modèles d’incorporation GTE v1.5 (anglais) sont désormais pris en charge dans le débit provisionné de l’API Foundation Model
- Débogage du code inclus par l’assistant Databricks via l’action Correctif rapide
- Créer des budgets pour surveiller les dépenses de compte (Préversion publique)
- Le réglage précis du modèle Foundation est désormais disponible pour tous les clients (préversion publique)
- AI Gateway est désormais en Préversion publique
- Modèles Meta Llama 3.1 70B et 8B pris en charge dans le réglage fin du modèle Foundation
- Gestion améliorée des commentaires générés par l’IA
- Surveiller l’utilisation des clean room dans le tableau d’utilisation facturable
- Extension Databricks pour Visual Studio Code est GA
- L’appel de fonction n’est pas pris en charge sur le débit approvisionné des API de modèle de fondation
- Les tables système sont désormais en disponibilité générale
- Août 2024
- Surveiller l’utilisation de l’objet catalogue Unity par rapport aux quotas à l’aide des nouvelles API Quotas de ressources
- Retrait des modèles MPT 7B Instruct et MPT 30B Instruct
- AskSupport remplacé par l’assistant Azure Databricks
- Tableau de bord de gestion des coûts importable ajouté à la console de compte (préversion publique)
- Les tables système Lakeflow sont étendues avec des colonnes supplémentaires
- Erreurs de mise en forme du code Python en surbrillance
- DeltaSharing : plus de fonctionnalités Delta Lake désormais prises en charge par les connecteurs Python et Power BI
- Delta Sharing ajoute la prise en charge de TimestampNTZ
- La tâche Travaux Azure Databricks
For each
est en disponibilité générale - Autorisation RBAC Azure pour les administrateurs d’espace de travail
- Databricks Runtime 15.4 LTS est en disponibilité générale
- Saisie semi-automatique de notebook personnalisée
- Configurer le mode d’accès par défaut de votre espace de travail pour la capacité de calcul des travaux
- Nouvelles commandes de barre oblique pour l’assistant Databricks
- La recherche d’espace de travail prend maintenant en charge les volumes
- Modèles Meta Llama 3.1 405B pris en charge dans le réglage précis du modèle Foundation
- Pilote JDBC Databricks 2.6.40
- Les jetons d’accès personnels Databricks sont révoqués s’ils ne sont pas utilisés après 90 jours
- L’API Clusters prend désormais en charge les mises à jour de configuration partielles
- Encapsuler des lignes dans les cellules du notebook
- Spécifier des colonnes à synchroniser pour la recherche vectorielle de mosaïque IA
- Les fichiers ne peuvent plus avoir de noms identiques dans les dossiers d’espace de travail
- L’application de la stratégie de calcul est désormais disponible
- Les API Foundation Model avec paiement par jeton sont désormais en disponibilité générale
- Collaborer sur des projets de données en toute sécurité et de manière confidentielle en utilisant des Salles blanches Databricks (Préversion publique)
- La recherche vectorielle Mosaïque AI est désormais conforme à HIPAA
- Mettre en forme des colonnes dans des tables de résultats de notebook et de requête
- Les filtres de ligne et les masques de colonne sont désormais en disponibilité générale, avec des améliorations
- Lakehouse Federation est en disponibilité générale (GA)
- Juillet 2024
- Limite accrue pour les tâches simultanées
- Incorporer et glisser-déposer des images dans des notebooks
- Palette de commandes disponible dans les notebooks
- Schéma de système de flux de travail renommé en
lakeflow
- LakeFlow Connect (préversion publique contrôlée)
- La prise en charge du stockage Cloudflare R2 est en disponibilité générale
- Surveiller les activités de l’Assistant Databricks avec des tables système (préversion publique)
- Le partage de schémas à l’aide de Delta Sharing est désormais en disponibilité générale
- Mosaic AI Agent Framework est disponible dans
northcentral
etcentralus
- L’Assistant Databricks peut diagnostiquer les problèmes liés aux travaux (préversion publique)
- Mises à jour de l’authentification des dossiers et des comportements des partages de Git Databricks
- Délai d’expiration de l’installation des bibliothèques de cluster
- Les adresses IP sortantes du plan de calcul doivent être ajoutées à une liste verte d’adresses IP de l’espace de travail
- Extension du support pour la série Databricks Runtime 9.1
- L’authentification unique (SSO) est prise en charge dans Lakehouse Federation pour SQL Server
- Le partage de modèles à l’aide de Delta Sharing est désormais en disponibilité générale
- Partager des commentaires et des contraintes de clé primaire à l’aide de Delta Sharing
- Nouveau pilote JDBC Databricks (OSS)
- Databricks Runtime 15.4 LTS (bêta)
- Scala est en disponibilité générale sur le calcul partagé Unity Catalog
- Le calcul mono-utilisateur prend en charge le contrôle d’accès affiné, les vues matérialisées et les tables de diffusion en continu
- La table système de la chronologie de nœud est désormais disponible (préversion publique)
- Meta Llama 3.1 est désormais pris en charge dans Model Serving pour Azure
- Notebooks : activer/désactiver des titres de cellule plus visibles
/
dans les noms des ressources d’espace de travail est déconseillé- Delta Sharing vous permet de partager des tables qui utilisent le clustering liquide
- La table système d’historique des requêtes est désormais disponible (préversion publique)
- Les rapports d’analyse des vulnérabilités sont désormais envoyés par e-mail aux administrateurs
- Journalisation des métadonnées de partition pour les tables externes du catalogue Unity
- Calcul serverless pour les flux de travail est en disponibilité générale
- Calcul serverless pour les notebooks est en disponibilité générale
- Databricks Connect pour Python prend désormais en charge le calcul serverless
- Filtrer les sorties de données avec des prompts en langage naturel
- Prise en charge des secrets en texte en clair pour les modèles externes
- Prévision des données de série chronologique à l’aide de
ai_forecast()
- La prise en charge des tâches de fichier SQL pour les fichiers avec des requêtes SQL à instructions multiples est en disponibilité générale
- Lakehouse Federation prend en charge Salesforce Data Cloud (préversion publique)
- Table système de l’Assistant Databricks désormais disponible (préversion publique)
- API SCIM de compte v2.1 (préversion publique)
- Augmentation du quota de ressources pour les tables par metastore du catalogue Unity
- L’Assistant Databricks peut diagnostiquer automatiquement des erreurs de notebook
- La prise en charge de la syntaxe
:param
avec la tâche de fichier SQL est en disponibilité générale
- Juin 2024
- Notebooks : mise en surbrillance de la syntaxe dans le désordre
- L’assistant Notebooks diagnostique automatiquement les erreurs
- Améliorations apportées à l’Explorateur de catalogues
- Servir plusieurs modèles externes à partir d’un seul modèle de point de terminaison de service
- L’Assistant Databricks est désormais en disponibilité générale
- L’Assistant Databricks donne désormais des titres aux threads
- Gestionnaire d’environnement des notebooks serverless
- Console de débogage de notebooks
- Ajouter rapidement un planning périodique à un workflow Azure Databricks
- Databricks Runtime 15.3 est en disponibilité générale
- Les zones géographiques Azure sont en disponibilité générale
- Nouvelle interface utilisateur améliorée de création de catalogues
- Mises à jour des sous-réseaux dans les configurations de connectivité réseau
- Les tables du système de facturation sont activées par défaut
- La supervision Lakehouse est en disponibilité générale
- Le partage de volume à l’aide du partage Delta est désormais en disponibilité générale
- Les clés gérées par le client (CMK) pour la recherche vectorielle Databricks sont désormais en disponibilité générale
- Mosaic AI Agent Framework (préversion publique)
- L’optimisation prédictive est désormais en disponibilité générale
- L’optimisation des routes est disponible pour les points de terminaison de service
- Prise en charge de la mise en service de modèles avec un pare-feu de compte de stockage d’espace de travail
- Le mappage de colonnes est désormais en disponibilité générale
- Les tables système de flux de travail sont désormais disponibles (préversion publique)
- L’appel de fonctions est une préversion publique
- Interroger un index de recherche vectorielle à l’aide de
vector_search()
- La recherche vectorielle Mosaic AI prend désormais en charge la recherche hybride
- GTE est désormais pris en charge dans la mise en service de modèles
- Assistant Databricks : expérience threads et requêtes activée par défaut
- Éditeur Markdown de notebook amélioré
- Accéder rapidement aux tables de l’Explorateur de catalogue à partir de notebooks
- Pilote ODBC Databricks 2.8.2
- La nouvelle interface utilisateur des notebooks Databricks est désormais en disponibilité générale
- Mai 2024
- La configuration du pare-feu serverless prend désormais en charge d’autres types de calcul
- Fin du support de la série Databricks Runtime 15.0
- Databricks Runtime 15.3 (Beta)
- L’interface utilisateur des métriques de calcul est désormais disponible sur toutes les versions de Databricks Runtime
- Amélioration de la recherche et du filtrage dans les tables de résultats de l’éditeur SQL et notebook
- Nouveau tableau de bord permettant aux fournisseurs de la Place de marché Databricks de monitorer l’utilisation des référencements
- Afficher les requêtes fédérées générées par le système dans
Query Profile
- Les adresses IP sortantes du plan de calcul doivent être ajoutées à une liste verte d’adresses IP de l’espace de travail
- OAuth est pris en charge dans Lakehouse Federation pour Snowflake
- Déplacer et supprimer en bloc des objets d’espace de travail à partir du navigateur d’espace de travail
- Les objets du catalogue Unity sont disponibles dans Récents et Favoris
- Le nouveau connecteur dbt-databricks 1.8.0 adopte l’architecture dbt découplée
- Nouvelles API de paramètres de conformité et de sécurité (préversion publique)
- Databricks Runtime 15.2 est en disponibilité générale
- Nouveau connecteur Tableau pour Delta Sharing
- Nouveaux exemples de modèle de recommandation de Deep Learning
- Lier des informations d’identification de stockage et des emplacements externes à des espaces de travail spécifiques (préversion publique)
- Les dossiers Git sont en disponibilité générale
- Modèles dont l’apprentissage a déjà été effectué dans Unity Catalog (préversion publique)
- Mosaïque AI Vector Search est en disponibilité générale
- Autocomplétion de l’Assistant Databricks (préversion publique)
- Prise en charge de Meta Llama 3 dans Foundation Model Training
- Nouvelles modifications apportées à l’interface utilisateur du dossier Git
- Apprentissage du modèle de fondation (préversion publique)
- Autoriser les utilisateurs à copier des données dans le Presse-papiers à partir de la table de résultats
- Les valeurs des étiquettes d’attributs pour les objets Unity Catalog peuvent désormais contenir 1000 caractères (préversion publique)
- Page Nouvelles préversions
- Nouvelles fonctionnalités pour la recherche vectorielle d’IA de Mosaïque
- Le passage des informations d’identification et les contrôles d’accès aux tables du metastore Hive sont mis hors service
- Pilote JDBC Databricks 2.6.38
- Prise en charge du pare-feu pour le compte de stockage d’espace de travail en disponibilité générale
- Databricks Runtime 15.2 (bêta)
- Les blocs-notes détectent et terminent automatiquement les noms de colonnes pour les DataFrames Spark Connect
- Avril 2024
- Databricks Runtime 15.1 est en disponibilité générale
- Assistant Databricks : Conversations et historique
- Annuler les mises à jour de point de terminaison de service en attente dans Model Serving
- Meta Llama 3 est désormais pris en charge dans Model Serve pour Azure
- Le lignage des données capture désormais les lectures sur les tables avec des masques de colonnes et une sécurité au niveau des lignes
- Les notebooks détectent désormais automatiquement SQL
- Nouvelles colonnes ajoutées à la table système d’utilisation facturable (Préversion publique)
- Delta Sharing prend en charge des tables qui utilisent le mappage de colonnes (Préversion publique)
- Obtenir des schémas du point de terminaison de service (préversion publique)
- Création et installation des bibliothèques d’espace de travail ne sont plus disponibles
- Les travaux créés via l’interface utilisateur sont désormais mis en file d’attente par défaut
- La configuration de l’accès aux ressources à partir de points de terminaison de mise en service est en disponibilité générale
- Le Calcul serverless pour les Workflows est disponible en préversion publique
- Lakehouse Federation prend en charge les tables étrangères avec des identificateurs qui respectent la casse
- Le clonage de calcul clone désormais les bibliothèques installées sur le calcul d’origine
- La connectivité privée depuis un calcul serverless est en disponibilité générale
- Expérience d’interface utilisateur pour l’inscription d’application OAuth
- Améliorations de l’expérience développeur de notebook Delta Live Table (préversion publique)
- Mars 2024
- DBRX Base et DBRX Instruct sont désormais disponibles dans Model Serving (Mise en service de modèles)
- Model Serving est conforme à HIPAA dans toutes les régions
- Le débit approvisionné dans les API Foundation Model est en disponibilité générale et conforme à HIPAA
- MLflow applique désormais des limites de quota pour les expériences et les exécutions
- L’interface utilisateur Jobs est mise à jour pour mieux gérer les travaux déployés par les packs de ressources Databricks
- Google Cloud Vertex AI est pris en charge en tant que fournisseur de modèles pour les modèles externes
- Débogage de notebook interactif
- Inscription en libre-service pour les fournisseurs d’échanges privés sur Marketplace
- Databricks Runtime 15.0 est en disponibilité générale
- Databricks Repos est remplacé par les dossiers Git
- Extension de la prise en charge des séries Databricks Runtime 14.1 et 14.2
- Pilote ODBC Databricks 2.8.0
- Gérer les règles de point de terminaison privé (préversion publique)
- Accès à l’espace de travail pour le personnel Azure Databricks
- HIPAA prend désormais en charge le calcul serverless
- Les entrepôts SQL pour les notebooks sont en disponibilité générale
- Déléguer la possibilité de voir les métadonnées d’un objet dans Unity Catalog (préversion publique)
- Nouvelle limite par région pour les points de terminaison privés
- Databricks Runtime 15.0 (bêta)
- Fin du support de la série Databricks Runtime 14.0
- Nouveau calcul pour sys.path et CWD dans Repos
- Service de fonctionnalités est en disponibilité générale
- L’optimisation prédictive est disponible dans davantage de régions
- Février 2024
- Utiliser Delta Live Tables dans l’ingénierie de caractéristiques (préversion publique)
- Adresses IPv4 sources pour les connexions PrivateLink dans les journaux d’audit
- Restreindre le changement de propriétaire de travail et le paramètre Exécuter en tant que
- prise en charge des principaux de service géré Databricks
- Activer la mise à jour automatique des clusters (préversion publique)
- Les administrateurs peuvent activer des fonctionnalités de sécurité et de conformité renforcées (préversion publique)
- Prise en charge du stockage Cloudflare R2 pour éviter les frais de sortie inter-régions (préversion publique)
- Ajouter une interface utilisateur de données prend en charge le format de fichier XML
- Utiliser des fonctions IA pour appeler un modèle d’IA générative à partir d’API Foundation Model
- Les volumes Unity Catalog sont en disponibilité générale
- Recherche basée sur l’IA en page entière
- Exécuter des travaux du notebook SQL sur un entrepôt SQL
- Les déclencheurs d’arrivée de fichiers dans les travaux Azure Databricks sont en disponibilité générale
- La recherche de modèles Machine Learning dans Unity Catalog à l’aide de la recherche globale dans l’espace de travail
- Le proxy de serveur Git Databricks est en disponibilité générale
- Le proxy de serveur Git Databricks ne nécessite plus d’autorisations de CAN_ATTACH_TO
- La prise en charge des fichiers d’espace de travail pour les tâches de fichier dbt et SQL est en disponibilité générale
- Databricks Connect est en disponibilité générale pour Scala
- Créer des tables à partir des fichiers des volumes
- Databricks Runtime 14.3 LTS est en disponibilité générale
- Delta Sharing prend en charge des tables qui utilisent des vecteurs de suppression (préversion publique)
- Janvier 2024
- Prise en charge du format de fichier XML natif (préversion publique)
- Partager des modèles IA en utilisant Place de marché Databricks (Préversion publique)
- Mises à jour des règles de groupe de sécurité réseau
- Mise à jour du chemin de l’espace de travail
- La prise en charge du pare-feu du Stockage Azure à partir des calculs serverless est en disponibilité générale
- Création simplifiée de travaux Azure Databricks
- Analyser les charges de travail des modèles GPU à l’aide de tables d’inférence
- Accès basé sur le chemin d’accès d’URI aux volumes externes du catalogue Unity
- Les listes de contrôles d’accès peuvent être activées sur les espaces de travail mis à niveau
- La table système des événements de référencement de la Place de marché est désormais disponible (préversion publique)
- Interface utilisateur mise à jour pour les cellules de notebook (préversion publique)
- La fonctionnalité Correctif rapide fournit de l’aide sur les erreurs de syntaxe dans le notebook
- Databricks Runtime 14.3 LTS (Bêta)
- Partager des modèles IA en utilisant Delta Sharing (Préversion publique)
- Place de marché Databricks prend en charge le partage de volumes
- Créer des widgets à partir de l’interface utilisateur Databricks
- La table système des événements d’entrepôt est désormais disponible (préversion publique)
- La taille de fichier d’un espace de travail est désormais limitée à 500 Mo
- Notification de suppression des fonctionnalités pour une intégration Git héritée dans Databricks
- Pilote ODBC Databricks 2.7.7
- Fin du support de la série Databricks Runtime 13.2
- Les fonctionnalités d’assistance IA sont activées par défaut
- Décembre 2023
- Partager des affichages dynamiques en utilisant Delta Sharing (préversion publique)
- Partager des volumes en utilisant Delta Sharing (préversion publique)
- Diagramme des relations entre entités pour des clés primaires et des clés étrangères
- Augmentation de la limite de taille de chargement de fichiers de volume Unity Catalog
- Nouveau rendu des résultats des cellules du bloc-notes disponible (préversion publique)
- Thèmes de l’éditeur de bloc-notes disponibles
- La prise en charge des modèles externes dans la mise en service de modèle est en préversion publique
- Les tables en ligne Databricks sont en préversion publique
- L’interface utilisateur des paramètres d’intégration Git et Repos mentionne désormais correctement la prise en charge de GitHub Enterprise Server
- Pilote JDBC Databricks 2.6.36
- Support pour le référencement des fichiers d’espace de travail à partir de scripts d’initialisation
- La mise en service des fonctions et des fonctions est en préversion publique
- Les APIs de Modèle de base sont en préversion publique
- Nouvelle IU de paramètres d’administration unifiés
- Les scripts init sur DBFS sont en fin de vie
- Les scripts init globaux et nommés par cluster hérités sont en fin de vie
- Novembre 2023
- Databricks Vector Search est en préversion publique
- Les listes de contrôles d’accès ne peuvent plus être désactivées
- Nouveaux comportements et actions dans Catalog Explorer pour les volumes
- Databricks Runtime 14.2 est en disponibilité générale
- Connecteur Databricks SQL pour Python version 3.0.0
- Bibliothèques dans les fichiers d’espace de travail pris en charge sur les clusters partagés sans isolation
- Dépréciation des bibliothèques d’espaces de travail
- Le support pour les types de machines virtuelles de calcul confidentielles Azure est désormais en préversion publique
- Rechercher des listes de la Place de marché Databricks à l’aide de la recherche globale d’espace de travail
- Consommer des produits de données dans la Place de marché Databricks à l’aide de plateformes externes
- Support pour les entrepôts SQL serverless ajoutés pour plusieurs régions Azure
- Activation automatique de Unity Catalog pour les nouveaux espaces de travail
- Databricks Runtime 14.2 (bêta)
- La Place de marché Databricks comprend des accélérateurs de solution Databricks
- Lakehouse Federation ajoute la prise en charge de Google BigQuery
- Octobre 2023
- Connectivité serverless sécurisée pour Databricks SQL Serverless (préversion publique)
- Afficher la source YAML pour un travail Azure Databricks
- Ajouter une logique conditionnelle à vos workflows Azure Databricks
- Configurer des paramètres sur un travail Azure Databricks qui peut être référencé par toutes les tâches de travail
- Activer automatiquement les vecteurs de suppression
- La prise en charge du catalogue Unity pour
UNDROP TABLE
est en disponibilité générale - Partner Connect prend en charge Dataiku
- Les notebooks générés automatiquement sont désormais enregistrés en tant qu’artefacts MLflow
- Nouvelle région : Qatar Central
- Volumes Unity Catalog pris en charge avec le Pare-feu Azure et Private Link
- Optimisation prédictives (préversion publique)
- Les tables système de calcul sont désormais disponibles (préversion publique)
- Le calcul des fonctionnalités à la demande est en disponibilité générale
- Ingénierie des fonctionnalités dans Unity Catalog est en disponibilité générale
- Commentaires de table générés par l’IA (préversion publique)
- Modèles dans Unity Catalog sont en disponibilité générale
- Les bibliothèques sont désormais prises en charge dans des stratégies de calcul (Préversion publique)
- Partner Connect prend en charge Monte Carlo
- Recherche sémantique (aperçu public)
- Activer l’Assistant Databricks au niveau de l’espace de travail
- Nouveaux paramètres par défaut pour Photon
- Databricks Runtime 14.1 est GA
- Les notes de publication des outils de développement ont été déplacées
- Extension Databricks pour Visual Studio Code mise à jour vers la version 1.1.5
- Les E/S prédictives pour les mises à jour sont en disponibilité générale
- Les vecteurs de suppression sont GA
- Partner Connect prend en charge RudderStack
- Databricks CLI mis à jour vers la version 0.207.0 (aperçu public)
- Exécuter les cellules sélectionnées dans un notebook
- Utiliser la liaison espace de travail-catalogue pour accorder un accès en lecture seule à un catalogue
- Extension Databricks pour Visual Studio Code mise à jour vers la version 1.1.4
- SDK Databricks pour Python mis à jour vers la version 0.10.0 (bêta)
- SDK Databricks pour Go mis à jour vers la version 0.22.0 (bêta)
- Volumes Unity Catalog désormais en préversion publique pour Azure Chine
- Septembre 2023
- Fédération Lakehouse disponible sur des clusters mono-utilisateurs
- Déléguer la possibilité de créer des informations d’identification de stockage dans Unity Catalog
- Databricks Runtime 14.1 (bêta)
- Mise en service de modèles sur GPU optimisée pour les LLM en préversion publique
- Empêcher les exécutions d’un travail d’être ignorées lorsque vous atteignez des limites de concurrence
- Fournisseur Databricks Terraform mis à jour vers la version 1.27.0
- Interface CLI Databricks mise à jour vers la version 0.206.0 (préversion publique)
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.21.0 (bêta)
- Tables d’inférence pour les points de terminaison de mise en service de modèle est une préversion publique
- Pilote ODBC Databricks 2.7.5
- Extension Databricks pour Visual Studio Code mise à jour vers la version 1.1.3
- L’exécution de travaux en tant que principal de service est en disponibilité générale
- Interface CLI Databricks mise à jour vers la version 0.205.2 (préversion publique)
- Interface CLI Databricks mise à jour vers la version 0.205.1 (préversion publique)
- SDK Databricks pour Go mis à jour vers la version 0.20.0 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.9.0 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.7.1 (bêta)
- Fournisseur Databricks Terraform mis à jour vers la version 1.26.0
- Databricks Connect pour Databricks Runtime 14.0
- Tableaux de bord Lakeview en préversion publique
- Databricks Connect V2 est en préversion publique pour Scala
- Mise en service du modèle GPU en préversion publique
- Le calcul des fonctionnalités à la demande désormais disponible dans Unity Catalog (préversion publique)
- Databricks Runtime 14.0 est en disponibilité générale
- Mise à jour des notifications par e-mail de compte
- Fournisseur Databricks Terraform mis à jour vers la version 1.25.1
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.19.2 (bêta)
- Interface CLI Databricks mise à jour vers la version 0.205.0 (préversion publique)
- Emplacement réservé pour
/Workspace
- Packs de ressources Databricks (préversion publique)
- Fournisseur Databricks Terraform mis à jour vers la version 1.25.0
- Extension Databricks pour Visual Studio Code mise à jour vers la version 1.1.2
- Partner Connect prend en charge Snowplow
- Interface CLI Databricks mise à jour vers la version 0.204.1 (préversion publique)
- Filtrer les données sensibles avec des filtres de lignes et des masques de colonne (préversion publique)
- Les tables système incluent désormais le schéma de Place de marché (préversion publique)
- La table système de tarification est désormais disponible (préversion publique)
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.19.1 (bêta)
- Pilote ODBC Databricks 2.7.3
- Interface CLI Databricks mise à jour vers la version 0.204.0 (préversion publique)
- Data Explorer devient désormais Catalog Explorer
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.19.0 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.8.0 (bêta)
- Déléguer les privilèges de la liste d’autorisation dans Unity Catalog
- L’intégration des applications GitHub dans Repos est en disponibilité générale
- Août 2023
- Les tables s’affichent désormais dans la recherche de navigation
- Interface CLI Databricks mise à jour vers la version 0.203.3 (préversion publique)
- Pilote JDBC Databricks 2.6.34
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.18.0 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.7.0 (bêta)
- Fournisseur Databricks Terraform mis à jour vers la version 1.24.1
- Scripts d’initialisation sur la fin de vie de DBFS étendue au 1er décembre 2023
- Databricks Runtime 14.0 (bêta)
- L’expérience de navigation unifiée est en disponibilité générale
- Fournisseur Databricks Terraform mis à jour vers la version 1.24.0
- Paramètre Databricks Runtime pour Genomics supprimé de la page des paramètres d’administration de l’espace de travail
- Paramètre des services de conteneur supprimé de la page des paramètres d’administration de l’espace de travail
- Interface CLI Databricks mise à jour vers la version 0.203.2 (préversion publique)
- Accéder à la définition des fonctions et des variables dans les notebooks Python
- Databricks Runtime 13.3 LTS est en disponibilité générale
- Présentation des étiquettes avec Unity Catalog
- La liste d’autorisation pour les scripts init, les fichiers JAR et les coordonnées Maven sur les clusters partagés Unity Catalog est en préversion publique
- La prise en charge des volumes pour les scripts init et les fichiers JAR est en préversion publique
- Validations aisée de sortie de fichier .ipynb Databricks Repos
- La prise en charge des notebooks IPYNB dans Databricks Repos est en disponibilité générale
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.17.0 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.6.0 (bêta)
- Interface CLI Databricks mise à jour vers la version 0.203.1 (préversion publique)
- Le navigateur de schémas unifié est désormais en disponibilité générale
- Les modifications de sous-réseau serverless peuvent vous affecter si vous encodez des ID dans un script ou un modèle
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.16.0 (bêta)
- Partner Connect prend en charge Census
- Clés HSM managées Azure Key Vault désormais prises en charge pour les clés gérées par le client
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.5.0 (bêta)
- Prise en charge de l’écriture par programmation pour les fichiers d’espace de travail
- Interface CLI Databricks mise à jour vers la version 0.203.0 (préversion publique)
- Fournisseur Databricks Terraform mis à jour vers la version 1.23.0
- Les groupes peuvent à présent être renommés
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.15.0 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.4.0 (bêta)
- Le paramètre de configuration de la prévention de l’iFraming tiers a été supprimé
- Extension Databricks pour Visual Studio Code mise à jour vers la version 1.1.1
- LangChain disponible dans les versions 13.1 et ultérieures
- L’ingénierie de caractéristiques dans Unity Catalog est en préversion publique
- Amélioration de la gestion des erreurs en cas de défaillances répétées d’une tâche en continu
- Entrepôts SQL serverless désormais disponibles dans d’autres régions
- Partager des schémas à l’aide de Delta Sharing (préversion publique)
- Exécuter des tâches de manière conditionnelle dans vos travaux Azure Databricks
- Fournisseur Databricks Terraform mis à jour vers la version 1.22.0
- Fonctionnalités de sécurité et de conformité améliorées
- Lakehouse Monitoring est une préversion publique
- Databricks Runtime 13.3 LTS (bêta)
- Les nouvelles opérations Git sont en disponibilité générale : fusionner des branches, rebaser et extraire avec la résolution des conflits
- Juillet 2023
- Les administrateurs d’espace de travail peuvent désormais créer des groupes de comptes
- Le rôle de gestionnaire de groupe est en préversion publique
- Interface CLI Databricks mise à jour vers la version 0.202.0 (préversion publique)
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.3.0 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.14.1 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.14.0 (bêta)
- Exécuter un autre travail en tant que tâche dans un travail Azure Databricks
- La mise à jour réseau de l’espace de travail obtient la prise en charge de l’interface utilisateur (GA)
- Tous les utilisateurs peuvent accéder aux produits de données dans Databricks Marketplace par défaut
- Mode raccourcis clavier classiques
- Lakehouse Federation vous permet d’exécuter des requêtes sur des fournisseurs de base de données externes (préversion publique)
- Déplacer vers la corbeille activé pour Repos
- Créer des alertes pour les tâches lentes ou bloquées
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.13.0 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.2.0 (bêta)
- Interface CLI Databricks mise à jour vers la version 0.201.0 (préversion publique)
- Kit de développement logiciel (SDK) Databricks pour Python mis à jour vers la version 0.2.1 (bêta)
- L’assistant Databricks est en préversion publique
- Désactiver les utilisateurs et les principaux de service de votre compte
- L’approvisionnement SCIM au niveau du compte désactive désormais les utilisateurs lorsqu’ils sont désactivés dans le fournisseur d’identité
- Accès administrateur au répertoire Trash
- La prévention de la détection de type MIME et le rendu des pages d’attaque XSS sont désormais activés en permanence
- Les volumes Unity Catalog sont en préversion publique
- Expérience simplifiée pour l’envoi de commentaires sur les produits à partir de l’espace de travail
- Extension Databricks pour Visual Studio Code mise à jour vers la version 1.1.0
- Functions désormais affiché dans Catalog Explorer (préversion publique)
- Fournisseur Databricks Terraform mis à jour vers la version 1.21.0
- Le décalage maximal pour les requêtes d’API
List all jobs
etList job runs
est désormais limité - Databricks Runtime 13.2 est en disponibilité générale
- Delta Sharing et Databricks Marketplace prennent en charge le partage de vue (préversion publique)
- Les scripts init sur DBFS arrivent en fin de vie le 1er septembre 2023
- Juin 2023
- Fournisseur Databricks Terraform mis à jour vers la version 1.20.0
- Interface CLI Databricks mise à jour vers la version 0.200.1 (préversion publique)
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.12.0 (bêta)
- Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.11.0 (bêta)
- Kit de développement logiciel (SDK0 Databricks pour Python (Bêta)
- Kit de développement logiciel (SDK0 Databricks pour Go (Bêta)
- Journal d’audit d’accès, utilisation facturable et tableaux de système de traçabilité (préversion publique)
- Modèles dans Unity Catalog (préversion publique)
- La Place de marché Databricks est maintenant en disponibilité générale
- Databricks Runtime 13.2 (bêta)
- Extension Databricks pour Visual Studio Code (Disponibilité générale)
- Activer des clés gérées par le client à l’aide d’Azure CLI et de PowerShell sans modèle
- Les entrepôts SQL serverless fonctionnent avec les principaux Azure Private Link activés
- Voir une vue d’ensemble visuelle des exécutions de travaux terminées dans l’interface utilisateur des travaux Azure Databricks
- CLI Databricks (préversion publique)
- Pagination améliorée des résultats des requêtes d’API
List all jobs
etList job runs
- Le navigateur d’espace de travail pleine page inclut Repos
- Fournisseur Databricks Terraform mis à jour vers la version 1.19.0
- Exécuter des travaux en principal de service (Préversion publique)
- La nouvelle IU du principal de service offre une meilleure expérience de gestion
- Dossiers de base restaurés lorsque des utilisateurs sont à nouveau ajoutés aux espaces de travail
- Place de marché Databricks : Les échanges privés sont désormais disponibles
- Place de marché Databricks : les consommateurs peuvent désinstaller des produits de données par l’interface utilisateur
- Place de marché Databricks : les fournisseurs peuvent créer leurs propres profils
- Databricks Connect V2 est en disponibilité générale pour Python
- Fournisseur Databricks Terraform mis à jour vers la version 1.18.0
- Nouveaux fournisseurs de la Place de marché Databricks
- Databricks Runtime 13.1 est en disponibilité générale
- Afficher les données des notebooks, de l’éditeur SQL et de Catalog Explorer avec le navigateur de schémas unifié (préversion publique)
- Mai 2023
- Créer ou modifier l’interface utilisateur d’une table prend en charge les chargements de fichiers Avro, Parquet et texte
- Utiliser l’interface utilisateur « ajouter des données » pour charger des données à l’aide des emplacements externes Unity Catalog (Version préliminaire publique)
- Exécuter des notebooks Databricks sur des entrepôts SQL (préversion publique)
- Empêcher la Clé d’entrée d’accepter la suggestion de l’autocomplétion
- Nouvelle région : Chine Est 3
- Prise en charge des types de machines virtuelles de calcul confidentielles Azure (préversion publique)
- Fournisseur Databricks Terraform mis à jour vers la version 1.17.0
- Charger l’interface utilisateur des données prend en charge les nouveaux types de données de colonne
- Lier des catalogues Unity Catalog à des espaces de travail spécifiques
- Tous les utilisateurs peuvent se connecter à Fivetran à l’aide de Partner Connect (préversion publique)
- Fournisseur Databricks Terraform mis à jour vers la version 1.16.1
- Pilote JDBC Databricks 2.6.33
- Partner Connect prend en charge Alation
- Nouveau thème par défaut pour l’éditeur
- Fournisseur Databricks Terraform mis à jour vers la version 1.16.0
- La prise en charge d’Unity Catalog pour les identités managées Azure est désormais en disponibilité générale
- Databricks Runtime 13.1 (bêta)
- Exécuter des requêtes SQL basées sur des fichiers dans un workflow Azure Databricks
- Fournisseur Databricks Terraform mis à jour vers la version 1.15.0
- Les régions Azure Chine prennent désormais en charge Unity Catalog
- Pseudos de compte désormais disponibles dans la console de compte
- Partager des notebooks à l’aide de Delta Sharing
- Azure Databricks ne crée plus d’entrepôt SQL de démarrage serverless
- Dans l’API SQL Warehouses, l’activation du calcul serverless doit maintenant être explicite
- Modifications apportées aux paramètres de l’espace de travail pour les entrepôts SQL serverless
- Modifications apportées aux paramètres de calcul serverless pour les comptes et les espaces de travail
- Databricks SQL Serverless est en disponibilité générale
- Mettre à niveau un espace de travail existant avec une connectivité de cluster sécurisée ou un Azure Private Link (préversion publique)
- Dépréciation des scripts init associés aux clusters de l’étendue sur DBFS
- Navigation unifiée (préversion publique)
- Avril 2023
- Place de marché Databricks (préversion publique) : place de marché ouverte pour les données, l’analytique et l’IA
- Configurer le formateur Python
- Les fichiers d’espace de travail sont en disponibilité générale
- Les scripts init associés aux clusters de l’étendue peuvent désormais être stockés dans des fichiers d’espace de travail
- Créer une étendue de secret Azure Key Vault avec un principal de service
- Les nouveaux privilèges Delta Sharing permettent la délégation des tâches de gestion du partage, du destinataire et du fournisseur
- Databricks Connect V2 (préversion publique)
- Nouvelle interface utilisateur des métriques de cluster
- Databricks Runtime 13.0 est en disponibilité générale
- Contrôler l’accès à la console du compte par plages d’adresses IP (préversion publique)
- Fournisseur Databricks Terraform mis à jour vers la version 1.14.3
- Entrées de journal de diagnostic pour les paramètres d’administration modifiés pour l’espace de travail
- Pour la clé initiale gérée par le client pour les disques managés, Azure Databricks met désormais fin aux ressources de calcul
- Fournisseur Databricks Terraform mis à jour vers les versions 1.14.1 et 1.14.2
- Paramètres utilisateur SQL combinés et paramètres utilisateur généraux
- Visualisations de notebook héritées déconseillées
- Créer ou modifier une table à partir d’une page de téléchargement de fichiers prend en charge les téléchargements de fichiers JSON
- Mars 2023
- Fournisseur Databricks Terraform mis à jour vers la version 1.14.0
- Fin de la prise en charge de Databricks Runtime 7.3 LTS ML
- Entraînement distribué avec TorchDistributor
- Databricks Runtime 13.0 (bêta)
- Éditeur de fichiers amélioré
- Modifier la redondance du stockage racine DBFS pour les espaces de travail Azure Databricks existants
- Prise en charge des notebooks .ipynb (Jupyter) dans Repos (préversion)
- Prise en charge de reload4j
- Nouvelles adresses IP pour la région Asie Est
- Exécuter des cellules SQL dans le notebook en parallèle
- Créer des tâches de travail à l’aide de code Python stocké dans un référentiel Git
- Fournisseur Databricks Terraform mis à jour vers la version 1.13.0
- Fournisseur Databricks Terraform mis à jour vers la version 1.12.0
- Console d’administration SQL et console d’administration de l’espace de travail combinées
- La mise en service de modèles est en disponibilité générale
- La recherche automatique de fonctionnalités est en disponibilité générale
- Pour les nouveaux espaces de travail qui utilisent des UDR, l’adresse IP de stockage Azure a besoin d’un UDR supplémentaire
- Le stockage racine DBFS Azure Databricks utilise Azure Data Lake Storage Gen2 pour les nouveaux espaces de travail
- Disponibilité d’un nouveau Catalog Explorer
- Afficher les requêtes fréquentes et les utilisateurs d’une table à l’aide de l’onglet Insights
- La recherche de correspondance exacte est disponible dans la recherche globale
- Afficher les informations de traçabilité de vos travaux Azure Databricks
- Databricks Runtime 12.2 LTS et Databricks Runtime 12.2 LTS ML sont en disponibilité générale
- Les fichiers d’espace de travail sont désormais en préversion publique
- Février 2023
- Prise en charge des instances de la série ND A100 v4 (préversion publique)
- Ray sur Azure Databricks (préversion publique)
- Augmentation de la limite de résultats de sortie de cellule de notebook
- Azure Databricks prend désormais en charge l’exécution de travaux continus
- Déclencher votre travail Azure Databricks à l’arrivée de nouveaux fichiers
- Fournisseur Databricks Terraform mis à jour vers la version 1.10.0
- Scripts init globaux et scripts init nommés par cluster hérités désactivés
- Améliorations apportées à l’interface utilisateur d’expérience MLflow
- Databricks Runtime 12.2 (bêta)
- Utiliser des identités managées affectées par l’utilisateur pour accéder au stockage dans Unity Catalog (préversion publique)
- Extension Databricks pour Visual Studio Code (préversion publique)
- Préversion publique de l’inférence en temps réel serverless désormais disponible pour tous les clients
- Les entrepôts SQL serverless sont disponibles pour les espaces de travail dans les régions prises en charge (préversion publique)
- Fournisseur Databricks Terraform mis à jour vers la version 1.9.2
- Les clés gérées par le client permettent de protéger et de contrôler l’accès à certains types de données (disponibilité générale)
- Explorateur de variables dans les notebooks Azure Databricks
- Janvier 2023
- Activer la connectivité privée avec Azure Private Link (préversion publique)
- La SCIM de compte est désormais en disponibilité générale
- Création et modification plus faciles des travaux Azure Databricks dans l’interface utilisateur
- Améliorations apportées à l’interface utilisateur des travaux Azure Databricks lors de l’affichage des exécutions de travaux
- Le nouvel écran d’accueil de la console de compte offre une meilleure expérience de gestion des comptes
- Fournisseur Databricks Terraform mis à jour vers la version 1.9.1
- Les utilisateurs de compte peuvent mettre à jour les préférences relatives aux e-mails dans la console de compte
- Prise en charge régionale consolidée sur une seule page
- Databricks Runtime 12.1 et Databricks Runtime 12.1 ML sont en disponibilité générale
- Les stratégies de cluster prennent désormais en charge la limitation du nombre maximal de clusters par utilisateur
- Fournisseur Databricks Terraform mis à jour vers la version 1.9.0
- les entrepôts SQL serverless sont disponibles dans les régions USA Centre et Europe Nord
- Partner Connect prend en charge la connexion à Privacera
- Fournisseur Databricks Terraform mis à jour vers la version 1.8.0
- Databricks Runtime 12.1 (bêta)
- Partner Connect prend en charge Sigma
- Nouvelles barres latérales gauche et droite dans les notebooks Databricks
- Décembre 2022
- Le pilote SQL Databricks pour Go est en disponibilité générale
- Empêcher les mises à jour simultanées de l’espace de travail
- Nouvelle région Azure : Chine Nord 3
- Fournisseur Databricks Terraform mis à jour vers la version 1.7.0
- Databricks Runtime 12.0 et 12.0 ML sont en disponibilité générale
- Les travaux sont désormais disponibles dans recherche globale (préversion publique)
- Les graphiques d’utilisation facturables peuvent désormais être agrégés par étiquettes individuelles
- Utiliser SQL pour spécifier des emplacements de stockage au niveau du schéma et du catalogue pour les tables managées Unity Catalog
- La capture des données de traçabilité avec Unity Catalog est désormais en disponibilité générale
- Pilote ODBC Databricks 2.6.29
- Pilote JDBC Databricks 2.6.32
- Partner Connect prend en charge la connexion à AtScale
- Novembre 2022
- Notifications améliorées pour vos travaux Azure Databricks (préversion publique)
- Databricks Runtime 12.0 (Beta)
- Configurer des pare-feu de stockage Azure pour autoriser l’accès à partir d’entrepôts SQL serverless
- L’interface utilisateur de chargement des données peut désormais être désactivée via les paramètres d’administration
- La prise en charge de Partner Connect pour Unity Catalog est en disponibilité générale
- Utiliser des dépôts volumineux avec La caisse éparse
- Fournisseur Databricks Terraform mis à jour vers la version 1.6.5
- Créer des entrepôts SQL serverless dans la région USA Ouest
- Fournisseur Databricks Terraform mis à jour vers les versions 1.6.3 et 1.6.4
- Spécifier un emplacement de stockage cloud pour les tables managées Unity Catalog au niveau du catalogue et du schéma
- Accéder aux objets récents à partir du champ de recherche dans la barre supérieure de votre espace de travail
- Créer ou modifier une table depuis la page de chargement de fichiers prend désormais en charge plusieurs fichiers
- Créer ou modifier une table depuis la page de chargement de fichiers prend désormais en charge le remplacement
- Rechercher des travaux par nom avec l’API Travaux 2.1
- Fournisseur Databricks Terraform mis à jour vers la version 1.6.2
- La recherche de tables dans Unity Catalog est en disponibilité générale
- Octobre 2022
- GA : Prise en charge des dépôts pour les fichiers non-notebooks
- Clés gérées par le client pour le chiffrement de disque managé
- Déployer des modèles pour l’inférence en streaming avec des notebooks Delta Live Tables
- Se connecter à Fivetran à partir de l’interface utilisateur ajouter des données
- Databricks SQL Driver for Node.js est en disponibilité générale
- Partner Connect prend en charge la connexion à erwin Data Modeler by Quest
- Prise en charge du magasin de fonctionnalités Databricks pour Azure Cosmos DB (préversion publique)
- Appliquer des types de cluster d’isolation utilisateur sur un espace de travail
- Databricks Runtime 11.3 LTS et 11.3 LTS ML sont en disponibilité générale
- Mettre en forme du code Python dans les notebooks (préversion publique)
- Les principaux de service fournissent un accès d’API uniquement au compte Azure Databricks
- La stratégie de cluster Personal Compute est disponible par défaut pour tous les utilisateurs
- Ajouter une IU de données fournit une interface utilisateur centrale pour le chargement de données dans Azure Databricks
- Créer ou modifier une table à partir de la page de chargement de fichiers a pour effet d’unifier l’expérience pour le chargement de petits fichiers sur Delta Lake
- Partner Connect prend en charge la connexion à Hevo Data
- Activer la protection administrateur pour les clusters « Aucune isolation partagée »
- Personnage SQL intégré à une nouvelle expérience de recherche
- Héritage de privilèges pris en charge dans Unity Catalog
- Barre de navigation supérieure dans l’interface utilisateur
- Databricks Runtime 11.3 (bêta)
- La console de compte est disponible en plusieurs langues
- Septembre 2022
- Nouvelle solution de référence pour le traitement du langage naturel
- Autres régions pour Unity Catalog
- Barre de navigation supérieure dans l’interface utilisateur
- Les journaux d’audit incluent désormais des événements pour le terminal web
- Les journaux d’audit incluent désormais des événements pour la gestion des informations d’identification pour les référentiels Git
- Sélectionner des stratégies de cluster directement dans l’interface utilisateur Delta Live Tables
- Nouvelle carte de trasformation des données sur les pages d’accueil de l’espace de travail
- Orchestrer des tâches Databricks SQL dans vos flux de travail Azure Databricks (préversion publique)
- Le cache delta est désormais le cache de disque
- Capturer et afficher des données de traçabilité avec le catalogue Unity (préversion publique)
- Rechercher des tables avec Catalog Explorer (préversion publique)
- Afficher et organiser des ressources dans l’explorateur d’espace de travail entre des personnages
- Databricks Runtime 11.2 et 11.2 ML sont en disponibilité générale
- Août 2022
- Les utilisateurs de compte peuvent accéder à la console de compte
- Pilote ODBC Databricks 2.6.26
- Pilote JDBC Databricks 2.6.29
- Client Databricks Feature Store désormais disponible sur PyPI
- Unity Catalog est en disponibilité générale
- Delta Sharing est en disponibilité générale
- Databricks Runtime 11.2 (bêta)
- Volume de messages réduit dans l’interface utilisateur Delta Live Tables pour les pipelines continus
- Configuration de cluster simplifiée pour vos pipelines Delta Live Tables
- Orchestrer des tâches dbt dans vos flux de travail Databricks (préversion publique)
- La fédération des identités est en disponibilité générale
- Partner Connect prend en charge la connexion à Stardog
- Intégration de Databricks Feature Store à l’inférence serverless en temps réel
- Prise en charge de types de données supplémentaires pour la recherche automatique des caractéristiques de Databricks Feature Store
- BYOK (Bring Your Own Key) : Chiffrer les informations d’identification Git
- La préversion de l’interface utilisateur du cluster et le mode d’accès remplace le mode de sécurité
- Limitations de Unity Catalog (préversion publique)
- Inférence serverless en temps réel en préversion publique
- Recherche améliorée dans l’espace de travail désormais en disponibilité générale
- Utiliser des colonnes générées lorsque vous créez des jeux de données Delta Live Tables
- Mode d’édition amélioré pour les notebooks avec un éditeur basé sur Monaco (expérimental)
- Fin de la prise en charge de la série Databricks Runtime 10.3
- Activer la connectivité privée avec Azure Private Link (préversion publique)
- Activer les entrepôts SQL Serverless pour votre espace de travail (préversion publique)
- Delta Live Tables prend désormais en charge l’actualisation des tables sélectionnées uniquement dans les mises à jour de pipeline
- L’exécution du travail attend maintenant la fin de l’installation des bibliothèques de cluster
- Juillet 2022
- Databricks Runtime 11.1 et 11.1 ML sont en disponibilité générale
- Photon est en disponibilité générale
- Notification lors de l’achèvement du notebook
- Limite accrue du nombre de travaux dans les espaces de travail Azure Databricks
- Les journaux d’audit détaillés sont désormais enregistrés lorsque les requêtes Databricks SQL sont exécutées
- Pilote JDBC Databricks 2.6.27
- Pilote ODBC Databricks 2.6.25
- Databricks Runtime 11.1 (bêta)
- Visualisations de notebooks améliorées
- Juin 2022
- Modifications des autorisations
ALTER TABLE
pour Unity Catalog - Le support étendu de Databricks Runtime 6.4 est arrivé à son terme
- Fin du support de la série Databricks Runtime 10.2
- Pilote ODBC Databricks 2.6.24
- Le fournisseur Terraform Databricks est désormais en GA
- Databricks Runtime 11.0 et 11.0 ML sont en disponibilité générale ; 11.0 Photon est en préversion publique
- Passez au répertoire de travail par défaut Repos dans Databricks Runtime 11.0
- Fin du support de la série Databricks Runtime 10.1
- Delta Live Tables prend désormais en charge la méthode SCD de type 2
- Créer des pipelines Delta Live Tables directement dans l’interface utilisateur d’Azure Databricks
- Sélectionner le canal Delta Live Tables quand vous créez ou que vous modifiez un pipeline
- Communiquer entre des tâches de vos travaux Azure Databricks avec des valeurs de tâche
- Activer le basculement de compte dans l’interface utilisateur Databricks
- Modifications des autorisations
- Mai 2022
- Copier et coller des cellules de notebook entre des onglets et des fenêtres
- Prise en charge de types de données supplémentaires pour la recherche automatique des caractéristiques de Databricks Feature Store
- Databricks Runtime 11.0 (bêta)
- Amélioration de la recherche d’espace de travail (préversion publique)
- Explorer des résultats des cellules SQL dans des notebooks Python en mode natif à l’aide de Python
- Databricks Repos : Prise en charge de fichiers supplémentaires dans un dépôt
- Databricks Repos : Résoudre un problème lié à la perte de données d’expérimentation MLflow
- Nouvelle région Azure : USA Centre-Ouest
- L’Assistant Mise à niveau facilite la copie de bases de données et de tables multiples vers Unity Catalog (préversion publique)
- Prise en charge du proxy HTTP à l’échelle du système Power BI Desktop
- Les journaux d’audit peuvent désormais enregistrer l’heure d’exécution d’une commande de notebook
- Databricks Runtime 10.5 et 10.5 ML sont en disponibilité générale ; 10.5 Photon est en Préversion publique
- Pilote JDBC Databricks 2.6.25
- Voir en tant que quel utilisateur un pipeline s’exécute dans l’interface utilisateur Delta Live Tables
- Avril 2022
- Nouvelle région Azure : Suède Centre
- Utiliser des balises pour mieux gérer vos travaux Azure Databricks
- Fin du support de la série Databricks Runtime 10.0
- Obtenir une vue d’ensemble visuelle de vos exécutions de travaux avec le nouvel affichage de la matrice des travaux
- Gagner du temps et économiser des ressources quand les exécutions de vos travaux Azure Databricks échouent
- Afficher l’historique des exécutions pour les tâches de travail
- Attribuer un nouveau cluster dans l’interface utilisateur des tâches lorsque l’accès utilisateur unique n’existe plus
- Databricks Runtime 10.5 (bêta)
- Amélioration de l’interface utilisateur Delta Live Tables pour désactiver les actions non autorisées
- AutoML est généralement disponible
- Utiliser des jeux de données issus d’Unity Catalog avec AutoML
- Delta Live Tables est en disponibilité générale sur AWS et Azure, et en préversion publique sur GCP
- Interface SQL Delta Live Tables : changement non cassant des noms de tables
- Mars 2022
- Meilleures performances et coûts pour vos pipelines Delta Live Tables avec la mise à l’échelle automatique améliorée databricks
- Fichiers dans Repos activés par défaut dans les nouveaux espaces de travail
- Le magasin de caractéristiques Databricks est en disponibilité générale
- Partager une expérience à partir de sa page
- Correctif de bogue RStudio Workbench
- Nouvelles options de langue de l’espace de travail
- Databricks Runtime 10.4 LTS et 10.4 LTS ML sont en disponibilité générale ; 10.4 Photon est en préversion publique
- Unity Catalog est disponible en Préversion publique
- Delta Sharing est disponible en Préversion publique
- Faire pivoter la clé gérée par le client pour les services gérés
- Contrôle d’accès amélioré pour les pipelines de tables dynamiques Delta
- Tester la fonctionnalité en préversion Delta Live Tables avec le nouveau paramètre
channel
(préversion publique) - Amélioration de la gestion des erreurs pour les fonctions Python Delta Live Tables (préversion publique)
- Améliorations apportées à Databricks Repos
- Journalisation des diagnostics pour les modifications de stratégie de cluster
- Databricks Runtime 10.4 (bêta)
- Février 2022
- Planification facilitée pour vos pipelines Delta Live Tables (Préversion publique)
- Navigation facile dans l’historique de vos mises à jour de pipelines Delta Live Tables (Préversion publique)
- Assurer l’idempotence des tâches pour la requête Run now de l’API Jobs
- Améliorations de la stabilité et de la scalabilité des services de travaux
- Comparer les exécutions MLflow de différentes expériences
- Améliorations apportées à l’affichage des exécutions de comparaison MLflow
- Meilleure visibilité sur les propriétaires d’exécution des travaux dans l’interface utilisateur des clusters
- Supprimer des colonnes de jeu de données dans AutoML
- La page des expérimentations est en disponibilité générale
- Prise en charge des tables temporaires dans l’interface Python de Delta Live Tables
- Améliorations de l’interface utilisateur pour Delta Live Tables (préversion publique)
- Fin du support de la série Databricks Runtime 9.0
- Mises à jour de la page d’accueil Science des données et Ingénierie
- Databricks Repos prend désormais en charge AWS CodeCommit pour l’intégration de Git
- Visualisation améliorée pour vos pipelines Delta Live Tables (Préversion publique)
- Analyseur Markdown mis à jour
- Delta Live Tables prend désormais en charge le traitement de la capture de données modifiées (Préversion publique)
- Des metastores supplémentaires sont désormais disponibles dans plusieurs régions
- Sélectionner les infrastructures d’algorithmes à utiliser avec AutoML
- Les modèles MLflow hébergés par Databricks peuvent désormais rechercher des fonctionnalités dans les magasins en ligne
- Databricks Runtime 10.3 et 10.3 ML sont en disponibilité générale ; 10.3 Photon est en Préversion publique
- Janvier 2022
- Webhooks du registre de modèles MLflow dans Azure Databricks (Préversion publique)
- Changement cassant : le jeton d’idempotence du cluster est effacé à la fin du cluster
- Databricks Runtime 10.3 (bêta)
- Afficher des informations sur les exécutions de travaux récentes
- Utiliser Markdown dans l’éditeur de fichiers Databricks Repos
- Amélioration de la gestion des clusters pour les travaux qui orchestrent plusieurs tâches
- Fin du support des séries Databricks Runtime 8.3 et Databricks Runtime 8.4
- Pilote JDBC Databricks 2.6.22
- Des metastores supplémentaires sont désormais disponibles dans plusieurs régions
- Un nouveau bouton Partager remplace l’icône Autorisations dans les notebooks
- Nouvelles options de langue de l’espace de travail
- Des metastores supplémentaires sont désormais disponibles dans plusieurs régions
- Décembre 2021
- Date de fin de support de la série de support étendu Databricks Runtime 6.4
- La série de support étendu Databricks Runtime 5.5 atteint la fin du support
- Pilote JDBC Databricks 2.6.21
- Connecteur Databricks pour Tableau 2021.4
- Databricks Runtime 10.2 et 10.2 ML sont en disponibilité générale ; 10.2 Photon est en Préversion publique
- Région Suisse Ouest désormais disponible
- Analyseur Markdown mis à jour
- Améliorations de l’interface utilisateur pour Delta Live Tables
- Metastores supplémentaires bientôt disponibles dans plusieurs régions
- Mettre à jour le relais SCC pour la région Australie Sud-Est
- Support étendu de la série Databricks Runtime 8.3
- Databricks Runtime 10.2 (bêta)
- Rétablissement d’un changement cassant récent qui a supprimé l’échappement et les guillemets de $ dans les valeurs de variables d’environnement pour la création de clusters
- Novembre 2021
- Créer des balises pour les tables de fonctionnalités (Préversion publique)
- Coloration syntaxique et autocomplétion des commandes SQL dans les cellules Python
- Renommer, supprimer et modifier les autorisations pour les expériences MLflow à partir de la page des expériences (Préversion publique)
- Nouveaux profils de données dans les notebooks : récapitulatifs tabulaires et graphiques de vos données (Préversion publique)
- Amélioration de la journalisation lorsque les schémas évoluent lors de l’exécution d’un pipeline de tables dynamiques Delta
- Databricks Partner Connect en disponibilité générale
- Changement cassant : suppression de l’échappement et les guillemets de $ dans les valeurs de variables d’environnement pour la création de clusters
- Améliorations de la facilité d’utilisation des fichiers dans Repos
- Le support des widgets SQL hérités prend fin le 15 janvier 2022
- Améliorations de l’interface utilisateur pour les travaux Azure Databricks
- Connecteur de partage Delta pour Power BI
- Pilote ODBC Databricks 2.6.19
- Databricks Runtime 10.1 et 10.1 ML sont en disponibilité générale ; 10.1 Photon est en Préversion publique
- Databricks Runtime 10.1 (bêta)
- Renommer et supprimer des expériences MLflow (Préversion publique)
- Vous pouvez maintenant créer une stratégie de cluster en clonant une stratégie existante
- Changer plus aisément de langue par défaut pour les notebooks et les cellules de notebook
- Utiliser des fichiers dans Repos à partir du terminal web
- Octobre 2021
- Fin du support de la série Databricks Runtime 8.2
- Databricks Runtime 10.0 et 10.0 ML sont en disponibilité générale ; 10.0 Photon est en Préversion publique
- Améliorations de l’interface utilisateur pour Delta Live Tables (préversion publique)
- Indiquer un cluster de taille fixe lorsque vous créez un pipeline dans Delta Live Tables (Préversion publique)
- Afficher les mesures de qualité des données des pipelines déclenchées de Delta Live Tables (Préversion publique)
- L’orchestration de travaux est désormais en disponibilité générale
- Connecteur Databricks pour Power BI
- Repos prend désormais en charge les types de fichiers arbitraires
- Sortie d’exécution de tâche plus détaillée avec l’API Jobs
- Lisibilité améliorée des chemins d’accès des notebooks dans l’interface utilisateur Jobs
- Ouvrir votre pipeline Delta Live Tables dans un nouvel onglet ou une nouvelle fenêtre
- Nouvelle séquence d’échappement pour
$
dans les widgets d’entrée hérités dans SQL - Déploiement de modèle plus rapide avec notebook d’inférence par lot généré automatiquement
- Septembre 2021
- Databricks Runtime 10.0 (bêta)
- Pilote ODBC Databricks 2.6.18
- Utiliser des clés gérées par le client pour le chiffrement avec les espaces de travail existants
- Databricks Runtime 9.1 LTS et 9.1 LTS ML sont en disponibilité générale ; 9.1 Photon est en Préversion publique
- Fin du support de la série Databricks Runtime 8.1
- Pilote JDBC Databricks 2.6.19
- Partager des tables de caractéristiques entre espaces de travail
- Disponibilité générale de plusieurs types d’instances de GPU Azure
- Repos prend désormais en charge
.gitignore
- L’interface utilisateur améliorée pour les travaux est désormais standard pour tous les espaces de travail
- Databricks Runtime 9.1 (bêta)
- Gestion simplifiée des paramètres des travaux Azure Databricks
- Databricks SQL en préversion publique disponible dans tous les espaces de travail
- Supprimer des tables de fonctionnalités du magasin de fonctionnalités
- Accorder des autorisations d’affichage de pipeline dans l’interface utilisateur Delta Live Tables (préversion publique)
- Réduire l’utilisation des ressources de cluster avec Delta Live Tables (préversion publique)
- Utiliser des modèles MLflow dans vos pipelines Delta Live Tables (préversion publique)
- Rechercher des pipelines Delta Live Tables par nom (préversion publique)
- PyTorch TorchScript et d’autres bibliothèques tierces sont désormais pris en charge dans les tâches Azure Databricks
- Fin du support de la série Databricks Runtime 8.0
- Août 2021
- Databricks Repos en GA
- Prolongement du délai d’expiration pour les travaux de notebook de longue durée
- Améliorations de la stabilité et de la scalabilité des services de travaux
- Affichage des droits utilisateur accordés par l’appartenance aux groupes dans la console d’administration
- Gestion des autorisations d’expérience MLflow (préversion publique)
- Amélioration de la création de travaux à partir de notebooks
- Machines virtuelles Ddsv4-series (préversion publique)
- Amélioration de la prise en charge de la réduction des en-têtes de notebook
- Databricks Runtime 9.0 et 9.0 ML sont en disponibilité générale ; 9.0 Photon est en Préversion publique
- Databricks Runtime 9.0 (bêta)
- Gérer les dépôts par programmation avec l’interface CLI Databricks (préversion publique)
- Gérer les dépôts par programmation avec l’API REST Databricks (préversion publique)
- Fin du support de la série Databricks Runtime 7.6
- Les événements d’audit sont consignés lorsque vous interagissez avec Databricks Repos
- Amélioration du flux de travail de création et de gestion des travaux
- Runtimes photons à présent disponibles (préversion publique)
- Instructions simplifiées pour la définition des informations d’identification Git (préversion publique)
- Importer plusieurs notebooks au format
.html
- Améliorations de la convivialité pour les tables dynamiques Delta
- Juillet 2021
- Gérer les autorisations d’expérience MLflow avec l’API REST Databricks
- Interface web Azure Databricks traduite en portugais et en français (préversion publique)
- Le support Databricks Runtime 5.5 LTS pour Machine Learning prend fin. Il est remplacé par la version Support étendu
- Le support Databricks Light 2.4 prend fin le 5 septembre. Il est remplacé par la version Support étendu
- Nouvelle région Azure : Allemagne Centre-Ouest
- Informations d’actualisation des fonctionnalités disponibles dans l’interface utilisateur du magasin de fonctionnalités Databricks (préversion publique)
- Affichage jusqu’à 10 000 lignes de résultats
- Importation et exportation en bloc des notebooks dans un dossier en tant que fichiers sources
- L’autocomplétion des notebooks SQL utilise désormais uniquement des majuscules pour les mots clés SQL
- Widgets réorganisables et redimensionnables dans les notebooks
- Correctifs d’utilisabilité de l’interface utilisateur Azure Databricks
- Définition rapide des paramètres de pipeline lors de la création d’un pipeline Delta Live Tables
- Databricks Runtime 8.4 et 8.4 ML sont en disponibilité générale ; 8.4 Photon est en Préversion publique
- Utiliser Spark SQL avec l’API Delta Live Tables Python
- Amélioration du traitement et de l’analyse des données avec des travaux Azure Databricks (préversion publique)
- Réduction des coûts pour les clusters par défaut Delta Live Tables (préversion publique)
- Trier les pipelines par nom dans l’interface utilisateur Delta Live Tables (préversion publique)
- Changements dans la page de calcul
- La prise en charge de Databricks Runtime 5.5 LTS se termine, remplacée par le support étendu de Databricks Runtime 5.5 jusqu’à la fin de l’année 2021
- API Repos (préversion publique)
- Databricks Runtime 8.4 (bêta)
- Juin 2021
- Correction : L’option des dépôts pour Git est activée par défaut dans les espaces de travail nouveaux et existants dans certaines régions
- Changement apporté au magasin de fonctionnalités
- Amélioration de l’accès aux résultats dans la table d’exécutions MLflow
- Meilleure visibilité des coûts pour les tables dynamiques Delta
- Amélioration des contraintes de qualité des données pour les tables dynamiques Delta
- Changements d’API pour la mise à jour et le remplacement des listes d’adresses IP
- Pilote ODBC Databricks 2.6.17
- Fin du support de la série Databricks Runtime 7.5
- Optimisation des performances et contrôle des coûts à l’aide de différents pools pour le nœud de pilote et les nœuds worker
- Autorisations au niveau du Registre pour le registre de modèles
- Le répertoire de base d’un utilisateur n’est plus protégé quand vous supprimez un utilisateur à l’aide de l’API SCIM
- Databricks Runtime 8.3 et 8.3 ML sont en disponibilité générale ; 8.3 Photon est en Préversion publique
- Python et contrôle d’accès aux tables SQL (en disponibilité générale)
- L’interface utilisateur et l’API Jobs affichent désormais le propriétaire d’une exécution de tâche
- Protection des propriétés de configuration Spark sensibles et des variables d’environnement à l’aide de secrets (préversion publique)
- L’option des dépôts pour Git est activée par défaut dans les espaces de travail nouveaux et existants dans certaines régions
- Refonte de l’interface utilisateur des paramètres de l’espace de travail
- Mises à jour des jetons expirés des requêtes de base de données
ListTokens
etListAllTokens
- Confirmation désormais nécessaire lors de l’octroi ou la révocation d’autorisations d’administrateur
- Changements apportés aux raccourcis clavier dans l’interface utilisateur web
- Mai 2021
- Databricks Mosaic AI : solution collaborative et de données natives pour le cycle de vie ML complet
- SQL Analytics est renommé Databricks SQL
- Créer et gérer des pipelines ETL à l’aide de tables dynamiques Delta (préversion publique)
- Les machines virtuelles Azure Spot sont en disponibilité générale
- Chiffrer les requêtes Databricks SQL et l’historique des requêtes à l’aide de votre propre clé (préversion publique)
- Augmentation de la limite du nombre de clusters universels terminés
- Augmentation de la limite du nombre de clusters épinglés
- Gérer l’emplacement de stockage des résultats des notebook (préversion publique)
- Chiffrer les données de notebook et de secret dans le plan de contrôle avec votre propre clé (préversion publique)
- Fin du support de Databricks Runtime 7.4 series
- Les utilisateurs de dépôts peuvent désormais s’intégrer à Azure DevOps à l’aide de jetons d’accès personnels
- Avril 2021
- Databricks Runtime 8.2 (GA)
- Simplification de la gestion des travaux avec l’interface utilisateur des travaux améliorée
- Application automatique des changements de stratégie de cluster aux clusters existants après redémarrage ou modification
- Suivre les nouvelles tentatives dans vos tâches de travail en cas d’échec d’une tentative d’exécution de tâche
- Affichage rapide des détails d’un cluster lors de la création d’un cluster
- Expérience la plus récente reflétée dans la barre latérale MLflow
- Adoption du canal par défaut pour les fichiers
conda.yaml
dans MLflow - Authentification rationalisée de Tableau Online sur Azure Databricks avec Microsoft Entra ID
- Databricks Runtime 8.2 (bêta)
- Une nouvelle infrastructure étendue demande une mise à jour vers des routes personnalisées et des pare-feu de sortie
- Limites d’utilisateurs et de groupes
- Supervision simplifiée de l’état d’exécution des travaux
- Les scripts init globaux ne s’exécutent plus sur les clusters de service de modèle
- Réception d’un e-mail de notification sur l’activité dans le Registre de modèles
- Fin du support de la série Databricks Runtime 6.4
- Mars 2021
- Azure Databricks prend maintenant en charge le mode foncé pour l’affichage des notebooks
- Réduire votre coût TCO Azure Databricks avec les machines virtuelles Spot Azure (préversion publique)
- Databricks Runtime 8.1 (GA)
- Simplification de la création et de la gestion des travaux avec l’interface utilisateur des travaux améliorée (préversion publique)
- Suivre les nouvelles tentatives de travail avec une nouvelle valeur séquentielle renvoyée pour chaque tentative d’exécution de travail
- Limite accrue pour le nombre de travaux enregistrés dans les espaces de travail Premium
- Simplification de la connexion à Azure Databricks à partir de vos outils BI et clients SQL préférés
- Les dépôts Azure Databricks vous permettent d’utiliser les dépôts Git pour intégrer Databricks à des systèmes CI/CD
- Restauration des nouvelles tentatives automatiques pour les clusters de travaux en échec
- Authentification fluide depuis le bureau Tableau sur Azure Databricks en utilisant Microsoft Entra ID
- Databricks Runtime 8.1 (bêta)
- Model Serving prend maintenant en charge d’autres types de modèles
- Nouvelles options de recherche dans le registre de modèles
- Augmentation de la limite du nombre de clusters universels terminés
- Augmentation de la limite du nombre de clusters épinglés dans un espace de travail
- Databricks Runtime 8.0 (GA)
- Février 2021
- Nouveau connecteur Azure Databricks Power BI (GA)
- La journalisation des diagnostics des activités utilisateur dans Azure Databricks est en GA
- Ajout de modification_time aux réponses get-status et list de l’API REST DBFS
- Copie facile des noms d’expérience longs dans MLflow
- Ajustement de la taille de la mémoire et du nombre de cœurs pour les clusters
- Le terminal web est maintenant en GA
- Le connecteur Apache Spark pour Azure SQL Database et SQL Server prend en charge Databricks Runtime 7.x et ultérieur
- Fin du support de la série Databricks Runtime 7.2
- Databricks Runtime 7.6 GA
- Databricks Runtime 8.0 (bêta)
- Databricks Runtime pour Genomics maintenant déprécié
- Meilleure lisibilité de JSON dans l’affichage de l’artefact d’exécution MLflow
- Ajout de commentaires dans le registre de modèles avec l’API REST
- Spécification facile des valeurs de cluster par défaut dans les appels d’API
- Paramétrage de la configuration de worker de cluster en fonction de l’allocation de worker actuelle
- Transfert des informations spécifiques au contexte à la tâche d’un travail avec des variables de paramètre de tâche
- Les messages d’erreur des échecs de travail ne contiennent plus d’informations potentiellement sensibles
- Janvier 2021
- La connectivité sécurisée des clusters (pas d’IP publiques) est en GA
- Fin du support de la série Databricks Runtime 7.1
- Démarrage plus rapide des clusters avec les images Docker préchargées dans des pools d’instances
- La fonction Rechercher et remplacer des notebooks prend maintenant en charge le changement de toutes les occurrences d’une correspondance
- Clusters mononœuds (GA)
- Renommage du type de stratégie de cluster Forme libre en Non restreint
- Le champ Stratégie de cluster ne s’affiche pas si l’utilisateur n’a accès qu’à une seule stratégie
- Fin du support de la série Databricks Runtime 7.0
- Décembre 2020
- Databricks Runtime 7.5 GA
- L’API Jobs prend désormais en charge la mise à jour des travaux existants
- La nouvelle infrastructure de script init globale est en GA
- Databricks Runtime 7.5 (bêta)
- Le champ end_time de l’API Jobs utilise désormais l’heure d’époque
- Rechercher des fichiers DBFS avec un nouveau navigateur visuel
- Les contrôles de visibilité pour les travaux, clusters, notebooks et autres objets d’espace de travail sont maintenant activés par défaut sur les nouveaux espaces de travail
- Amélioration de l’affichage des exécutions imbriquées dans MLflow
- Les administrateurs peuvent maintenant verrouiller les comptes d’utilisateur (préversion publique)
- Mise à jour du pilote NVIDIA
- Novembre 2020
- Fin du support de la série Databricks Runtime 6.6
- Registre de modèles MLflow en GA
- Exécutions des essais de filtre selon qu’un modèle inscrit est associé ou non
- Galerie d’intégrations des partenaires désormais disponible par le biais de l’onglet Données
- Les stratégies de cluster utilisent désormais allowlist et blocklist comme noms de type de stratégie
- Nouvelles tentatives automatiques lors de l’échec de la création d’un cluster de travaux
- Navigation dans les notebooks à l’aide de la table des matières
- Databricks SQL (préversion publique)
- ters mononœuds prennent maintenant en charge Databricks Container Services
- Databricks Runtime 7.4 GA
- Mise à jour du pilote JDBC Databricks
- Databricks Connect 7.3 (bêta)
- Octobre 2020
- Nouveau connecteur Azure Databricks Power BI disponible dans le service Power BI en ligne (préversion publique)
- Databricks Runtime 7.4 (bêta)
- Utiliser des clés gérées par le client pour la racine DBFS (GA)
- Contrôle d’accès aux expériences étendu (ACL)
- Importation et exportation haute fidélité des fichiers de notebook Jupyter (ipynb)
- Amélioration de l’API SCIM : groupes indirects et directs retournés dans la réponse de l’enregistrement utilisateur
- L’ID de demande Azure est maintenant inclus dans les exceptions
- Fin du support de la série Databricks Runtime 6.5
- La connectivité sécurisée des clusters (pas d’adresses IP publiques) est en préversion publique
- Amélioration de l’API SCIM : réponse du champ
$ref
- Les journaux de diagnostic (audit) sont maintenant fournis avec une faible latence
- Databricks Runtime 7.3, 7.3 ML et 7.3 Genomics déclarés LTS (Long Term Support)
- Rendu des images dans une résolution plus élevée avec matplotlib
- Utilisation de l’interface CLI Databricks ou de l’API Databricks pour créer des étendues de secrets Azure Key Vault
- Utiliser des jetons Microsoft Entra ID pour s’authentifier auprès de l’interface CLI Databricks
- Nouvelles régions Azure (préversion publique)
- Septembre 2020
- Databricks Runtime 7.3, 7.3 ML et 7.3 Genomics sont maintenant en GA
- Clusters mononœuds (préversion publique)
- Limitation du débit de l’API REST DBFS
- Nouvelles icônes de la barre latérale
- Augmentation de la limite des travaux exécutés
- Listes de contrôle d’accès (ACL) d’artefacts dans MLflow
- Améliorations de la convivialité de MLflow
- Nouveau connecteur Azure Databricks Power BI (préversion publique)
- Utiliser des clés gérées par le client pour la racine DBFS (préversion publique)
- Les nouveaux pilotes JDBC et ODBC offrent une latence plus rapide et plus faible
- MLflow Model Serving (préversion publique)
- Améliorations de l’interface utilisateur des clusters
- Contrôles de visibilité pour les travaux, les clusters, les notebooks et autres objets d’espace de travail
- Possibilité de créer des jetons qui ne sont plus autorisés par défaut
- Le registre de modèles MLflow prend en charge le partage de modèles dans les espaces de travail
- Databricks Runtime 7.3 (bêta)
- Changement du nom du type de charge de travail Azure Databricks
- Août 2020
- L’API de gestion des jetons est en disponibilité générale, et les administrateurs peuvent utiliser la console d’administration pour accorder et révoquer l’accès des utilisateurs aux jetons
- Augmentation des limites de taille de message pour les applications Shiny
- Amélioration des instructions de configuration d’un cluster en mode local
- Voir la version de notebook associée à une exécution
- Databricks Runtime 7.2 GA
- Databricks Runtime 7.2 ML GA
- Databricks Runtime 7.2 Genomics GA
- API Permissions (préversion publique)
- Databricks Connect 7.1 (GA)
- Ordre d’installation reproductible pour les bibliothèques de clusters
- Créer un modèle à partir de la page des modèles inscrits MLflow (préversion publique)
- Databricks Container Services prend en charge les images GPU
- Juillet 2020
- Terminal web (préversion publique)
- Nouveau framework de script d’initialisation global plus sécurisé (préversion publique)
- Listes d’accès IP maintenant en disponibilité générale
- Nouvelle boîte de dialogue de chargement de fichier
- Améliorations du filtre et du tri dans l’API SCIM
- Ajout de régions Azure Government
- Databricks Runtime 7.1 GA
- Databricks Runtime 7.1 ML GA
- Databricks Runtime 7.1 Genomics GA
- Databricks Connect 7.1 (préversion publique)
- Mises à jour de l’API Liste d’accès IP
- Les notebooks Python prennent désormais en charge plusieurs sorties par cellule
- Afficher les cellules de code et de résultats des notebooks côte à côte
- Mettre en pause les planifications de travaux
- Les points de terminaison des API de travaux valident l’ID d’exécution
- Jetons Microsoft Entra ID pour accorder des autorisations sur la disponibilité générale de l’API REST Databricks
- Mettre automatiquement en forme le SQL dans les notebooks
- Ordre d’installation reproductible pour les bibliothèques Maven et CRAN
- Prendre le contrôle des jetons d’accès personnels de vos utilisateurs avec l’API de gestion des jetons (préversion publique)
- Restaurer les cellules de notebook coupées
- Affecter l’autorisation CAN MANAGE pour des travaux à des utilisateurs non-administrateurs
- Les utilisateurs Azure Databricks non-administrateurs peuvent afficher et filtrer par nom d’utilisateur avec l’API SCIM
- Lien pour afficher la spécification du cluster lorsque vous consultez les détails de l’exécution du travail
- Juin 2020
- Databricks Connect prend désormais en charge Databricks Runtime 6.6
- Databricks Runtime 7.0 ML GA
- Databricks Runtime 7.0 GA, alimenté par Apache Spark 3.0
- Databricks Runtime 7.0 pour Genomics GA
- Contrôles d’accès dépendants de la préproduction pour les modèles MLflow
- Les notebooks prennent maintenant en charge la désactivation du défilement automatique
- Changement d’adresses IP de metastore à compter du 30 juin 2020
- Le support d’Internet Explorer 11 prend fin le 15 août
- Fin du support de la série Databricks Runtime 6.2
- Simplifier et contrôler la création de clusters avec des stratégies de cluster (préversion publique)
- Le point de terminaison SCIM Me retourne maintenant une réponse compatible SCIM
- Restreindre l’accès à Azure Databricks avec des listes d’accès IP (préversion publique)
- Mai 2020
- Machines virtuelles de la série Easv4 (bêta)
- Databricks Runtime 6.6 pour Genomics en disponibilité générale
- Databricks Runtime 6.6 ML en disponibilité générale
- Databricks Runtime 6.6 en disponibilité générale
- Limite de taille de point de terminaison de suppression de l’API REST DBFS
- Voir facilement les grands chiffres des modèles inscrits MLflow
- Les bibliothèques configurées pour être installées sur tous les clusters ne sont pas installées sur les clusters exécutant Databricks Runtime 7.0 et ultérieur
- Databricks Runtime 7.0 pour Genomics (bêta)
- Databricks Runtime 7.0 ML (bêta)
- Databricks Runtime 6.6 pour Genomics (bêta)
- Databricks Runtime 6.6 ML (bêta)
- Databricks Runtime 6.6 (bêta)
- Les clusters de travail sont maintenant étiquetés avec le nom et l’ID de travail
- Restauration des cellules de notebook supprimées
- Limite de la file des travaux en attente
- Avril 2020
- URL uniques pour chaque espace de travail Azure Databricks
- Amélioration de l’interface utilisateur de suivi MLflow
- Améliorations de la convivialité de Notebook
- Utiliser des jetons pour accorder des autorisations sur l’API REST Databricks (préversion publique)
- Un seul utilisateur peut afficher les journaux Apache Spark sur un cluster pass-through
- Databricks Connect prend désormais en charge Databricks Runtime 6.5
- Fin du support de Databricks Runtime 6.1 et 6.1 ML
- Databricks Runtime 6.5 en disponibilité générale
- Databricks Runtime 6.5 pour le machine learning (disponibilité générale)
- Databricks Runtime 6.5 pour Genomics en disponibilité générale
- Fin du support de Databricks Runtime 6.0 et 6.0 ML
- Mars 2020
- Hub collaboratif du registre de modèles MLflow managés disponible (préversion publique)
- Les étiquettes d’espace de travail, de pool et de cluster s’étendent aux détails de l’utilisation des DBU et aux machines virtuelles Azure pour améliorer les rapports de gestion des coûts
- Préversions de Databricks Runtime 7.0 (bêta) pour Apache Spark 3.0
- Databricks Runtime 6.5 ML (bêta)
- Databricks Runtime 6.5 (bêta)
- Les commentaires Azure Databricks sont désormais directement dirigés vers le portail de commentaires Azure Databricks
- Développer et tester des applications Shiny dans RStudio Server
- Changer la langue par défaut d’un notebook
- Databricks Connect prend désormais en charge Databricks Runtime 6.4
- Databricks Connect prend désormais en charge Databricks Runtime 6.3
- Février 2020
- Databricks Runtime 6.4 pour Genomics en disponibilité générale
- Databricks Runtime 6.4 ML en disponibilité générale
- Databricks Runtime 6.4 en disponibilité générale
- Nouveaux graphiques interactifs qui offrent des interactions riches côté client
- Le nouveau réseau d’ingestion de données ajoute des intégrations de partenaires avec Delta Lake (préversion publique)
- Ajout automatique d’un créateur d’espace de travail en tant qu’administrateur Azure Databricks
- Indicateurs pour gérer les fonctionnalités de notebook et de sécurité des espaces de travail maintenant disponibles
- Janvier 2020
- Bientôt disponible : les étiquettes d’espace de travail, de pool et de cluster s’étendent aux détails de l’utilisation de DBU et aux machines virtuelles Azure pour améliorer les rapports de gestion des coûts
- Azure Databricks et Azure Lighthouse peuvent maintenant se trouver dans le même abonnement
- Databricks Runtime 6.3 pour Genomics en disponibilité générale
- Databricks Runtime 6.3 ML en disponibilité générale
- Databricks Runtime 6.3 en disponibilité générale
- Mise en cache de disque activée par défaut
- L’étape de mise à l’échelle automatique standard de cluster est maintenant configurable
- L’API SCIM prend en charge la pagination pour Get Users et Get Groups (préversion publique)
- La largeur de couloir de l’Explorateur de fichiers est passée à 240px
- Fin du support de Databricks Runtime 3.5 LTS
- Décembre 2019
- Databricks Connect prend désormais en charge Databricks Runtime 6.2
- Configurer des clusters avec votre propre image conteneur à l’aide des services de conteneur Databricks (Disponibilité générale)
- Databricks Runtime 6.2 pour Genomics en disponibilité générale
- Connecteur de provisionnement SCIM Azure Databricks disponible dans la galerie d’applications
- Fin du support de Databricks Runtime 5.3 et 5.4
- Databricks Runtime 6.2 ML en disponibilité générale
- Databricks Runtime 6.2 en disponibilité générale
- Databricks Connect prend désormais en charge Databricks Runtime 6.1
- Novembre 2019
- Databricks Runtime 6.2 ML version bêta
- Databricks Runtime 6.2 version bêta
- Configuration des clusters avec votre propre image conteneur à l’aide des services de conteneur Databricks
- Les détails du cluster ne montrent désormais que l’ID du cluster dans le chemin HTTP
- Secrets référencés par les propriétés de configuration et les variables d’environnement Spark (préversion publique)
- Octobre 2019
- Les métriques de capacité de prise en charge ont été déplacées vers Azure Event Hubs
- Le passage d’informations d’identification Azure Data Lake Storage sur les clusters standard et Scala est en disponibilité générale
- Databricks Runtime 6.1 pour la génomique (disponibilité générale)
- Databricks Runtime 6.1 pour le machine learning (disponibilité générale)
- Les appels de l’API MLflow sont désormais à fréquence limitée
- Disponibilité générale de pools d’instances pour un lancement rapide du cluster
- Databricks Runtime 6.1 (disponibilité générale)
- Databricks Runtime 6.0 pour la génomique (disponibilité générale)
- La possibilité de déployer un espace de travail Azure Databricks sur votre réseau virtuel, opération également appelée injection de réseau virtuel, est mise à la disposition générale.
- Les utilisateurs d’Azure Databricks non-administrateurs peuvent lire les ID et les noms d’utilisateurs et de groupes à l’aide de l’API SCIM
- L’API de l’espace de travail retourne les ID d’objet de dossier et de notebook
- Databricks Runtime 6.0 ML (disponibilité générale)
- Nouvelles régions : Brésil Sud et France Centre
- Databricks Runtime 6.0 (disponibilité générale)
- Septembre 2019
- Fin du support de Databricks Runtime 5.2
- Lancer des clusters automatisés reposant sur un pool qui utilisent Databricks Light (préversion publique)
- Les adresses IP de la passerelle Azure SQL Database ont changé le 14 octobre 2019
- Le passage des informations d’identification à Azure Data Lake Storage est désormais pris en charge sur les clusters standard et Scala (préversion publique)
- Les DataFrames pandas s’affichent désormais dans les notebooks sans mise à l’échelle
- L’affichage du sélecteur de version Python est maintenant dynamique
- Databricks Runtime 6.0 version bêta
- Août 2019
- Nouvelle région : Émirats arabes unis Nord
- Amélioration de l’installation de la bibliothèque d’espace de travail
- L’interface utilisateur des clusters reflète maintenant une terminologie de cluster interactive et automatisée plus cohérente
- Databricks Runtime 5.5 et Databricks Runtime 5.5 ML sont disponibles en version LTS
- Notifications d’allocation d’instance pour les pools
- Nouveaux événements de cluster
- Mises à jour de MLflow
- Juillet 2019
- Bientôt : Databricks 6.0 ne prendra plus en charge Python 2
- Précharger la version de Databricks Runtime sur les instances inactives du pool
- Les étiquettes de cluster personnalisées et les étiquettes de pool sont plus efficaces ensemble
- MLflow 1.1 apporte plusieurs améliorations au niveau de l’interface utilisateur et des API
- Les DataFrames pandas s’affichent comme dans Jupyter
- Nouvelles régions
- Mise à jour de la limite de connexions au metastore
- Définir des autorisations sur les pools (préversion publique)
- Databricks Runtime 5.5 pour le machine learning
- Databricks Runtime 5.5
- Conserver un pool d’instances en veille pour un lancement rapide du cluster (préversion publique)
- Métriques Ganglia
- Couleur de série globale
- Juin 2019
- Mai 2019
- Avril 2019
- MLflow sur Azure Databricks (disponibilité générale)
- Delta Lake sur Azure Databricks
- Barre latérale des exécutions MLflow
- Accéder à Azure Data Lake Storage Gen1 et Gen2 automatiquement avec vos informations d’identification Microsoft Entra ID (GA)
- Databricks Runtime 5.3 (disponibilité générale)
- Databricks Runtime 5.3 ML (disponibilité générale)
- Mars 2019
- Février 2019
- Janvier 2019
- Changement à venir : Python 3 sera la version par défaut lors de la création de clusters
- Publication de Databricks Runtime 5.2 pour le machine learning (version bêta)
- Vue JSON de la configuration d’un cluster
- IU de la création d’un cluster
- Déployer Azure Databricks dans votre propre réseau virtuel Azure (injection de réseau virtuel)
- IU de la bibliothèque
- Événements de cluster
- Gestion des versions des notebooks avec Azure DevOps Services
- Décembre 2018
- Novembre 2018
- IU de la bibliothèque
- Paramètres de mémoire de tas Spark personnalisés activés
- Travaux et éviction des contextes d’exécution inactifs
- Publication de Databricks Runtime 5.0 pour le machine learning (version bêta)
- Publication de Databricks Runtime 5.0
- Prise en charge de
displayHTML
pour le chargement non restreint de contenu tiers
- Octobre 2018
- Septembre 2018
- Août 2018
- Juillet 2018
- L’API Bibliothèques prend en charge les fichiers wheel Python
- Exportation d’un notebook IPython
- Étendue de secrets reposant sur Azure Key Vault
- Espaces de travail Premium (version d’évaluation)
- Mode de cluster et clusters à haute concurrence
- Contrôle d’accès aux tables
- Types de nœuds de cluster non disponibles estompés
- Prise en charge de R Markdown
- Reconception de la page d’accueil, avec possibilité de déposer des fichiers pour importer des données
- Comportement par défaut des widgets
- Interface utilisateur de création de table
- Importation de données JSON multilignes
- Juin 2018
- Mai 2018
- Règlement Général sur la Protection des Données (RGPD)
- Les utilisateurs Azure Databricks doivent appartenir à un locataire Microsoft Entra ID
- HorovodEstimator
- Exportation du modèle ML MLeap
- Autres types de cluster GPU
- Cellules de notebook : masquer et afficher
- Recherche sur le site de la documentation
- Databricks Runtime 4.1 ML pour le machine learning (version bêta)
- Databricks Delta
- Prise en charge de display() pour les types de données image
- Types de cluster GPU
- Gestion des secrets mise à la disposition générale
- Modifications apportées aux commandes de l’interface CLI et aux points de terminaison de l’API Secrets
- Épinglage des clusters
- Démarrage automatique des clusters
- Vidage de l’espace de travail
- Interface CLI Databricks 0.7.1
- Avril 2018
- Interface CLI Secrets
- Guide du deep learning
- Mise à jour de l’API Secrets pour la création d’une étendue de secrets
- Conseils sur les erreurs Spark
- Interface CLI Databricks 0.7.0
- Augmenter la limite de troncation de la sortie des scripts init
- API Clusters : ajout du type d’événement UPSIZE_COMPLETED
- Autocomplétion des commandes
- Pools serverless mis à niveau vers Databricks Runtime 4.0
- Mars 2018
- Détails de l’exécution des commandes
- L’interface CLI Databricks prend en charge
--profile
- Listes ACL activées par défaut pour les nouveaux clients de la référence SKU Premium
- Azure Databricks est désormais mis à la disposition générale
- Nouveau thème pour le site de la documentation
- Mise à l’échelle automatique du stockage local
- Peering de réseau virtuel (VNet)
- Journal des événements du cluster
- Databricks CLI : version 0.6.0
- Gestion des exécutions de travaux
- La modification des autorisations d’un cluster nécessite désormais le mode édition
- Exportation du modèle ML Databricks
- Février 2018
- Le nouveau graphique en courbes prend en charge les données de série chronologique
- Autres améliorations apportées aux visualisations
- Supprimer les exécutions de travaux à l’aide de l’API de travail
- Bibliothèque de rendu mathématique KaTeX mise à jour
- Databricks CLI : version 0.5.0
- Bibliothèque d’API DBUtils
- Filtrer uniquement vos travaux
- Paramètres spark-submit à partir de la page de création de travail
- Sélectionner Python 3 dans la page de création de cluster
- Améliorations apportées à l’interface utilisateur de l’espace de travail
- Autocomplétion des commandes SQL et des noms de base de données
- Les pools serverless prennent désormais en charge R
- XGBoost disponible en tant que package Spark
- Contrôle d’accès aux tables pour SQL et Python (bêta)
- Janvier 2018
- Points de montage pour les conteneurs Stockage Blob Azure et les dépôts Data Lake Store
- Étiquettes de cluster
- Contrôle d’accès aux tables pour SQL et Python (préversion privée)
- Exportation des résultats de l’exécution des travaux de notebook via l’API
- Apache Airflow 1.9.0 comprend l’intégration de Databricks