Azure Databricks プラットフォームのリリース ノート
- 2025 年 2 月
- サービス資格情報を使用した外部クラウド サービスへの Unity カタログ管理アクセスの が GA になりました
- Sql Warehouse に接続されているノートブックで Excel としてダウンロードがサポートされるようになりました
- デルタ ライブ テーブル シンク (パブリック プレビュー) を使用してパイプラインから外部サービスにデータを書き込む
- 自動 ID 管理 (パブリック プレビュー)
- 新しいリージョン: メキシコ中部
- 2025 年 1 月
- Azure Databricks の追加ポート
- 状態ストア リーダーの一般提供が開始されました
- 予測の最適化をカタログ レベルまたはスキーマ レベルで有効にできるようになりました
- 大きなテーブルの完全なデータセットのフィルター処理がサポートされるようになりました
- Meta Llama 3.1 405Bモデルファミリーは、Foundation Modelの微調整において廃止されました
- Clean Rooms が一般提供になりました
- AI エージェント ツールの外部サービスへの接続 (パブリック プレビュー)
- Delta Live Tables で、複数のスキーマとカタログのテーブルへの発行がサポートされるようになりました
- Databricks Runtime 16.2 (ベータ)
- コメントでメール通知と @メンションがサポートされるようになりました
- フォント サイズを調整するショートカット
- ドラッグ アンド ドロップを使用したワークスペース ファイルのインポート
- Meta Llama 3.3 が、Foundation Model API を使用する AI Functions に対応するようになりました
- Notebook出力の向上
- ノートブックの読み込み時間の短縮
- ノートブックがワークスペースファイルとしてサポートされています
- 継続的ジョブで失敗したタスクが自動的に再試行されるようになりました
- ノートブック: Databricks Assistant のチャット履歴は、開始したユーザーのみが利用できます
- 統計の収集が予測最適化によって自動化されるようになりました
- Databricks Marketplace と Partner Connect の UI の更新
- Databricks JDBC ドライバ 2.7.1
- Lakehouse フェデレーションが Teradata をサポート (パブリック プレビュー)
- databricks-agents SDK 0.14.0 リリース: カスタム評価メトリック
- AI ゲートウェイでプロビジョニング済みスループットがサポートされるようになりました (パブリック プレビュー)
- Databricks Runtime 15.2 シリーズのサポート終了
- Databricks Runtime 15.3 シリーズのサポート終了
- 基盤モデルの微調整での Meta Llama 2、3 および Code Llama モデル ファミリの廃止
- 2024 年 12 月
- Databricks Runtime 16.1 が一般提供になりました
- 新しいノートブックの既定の形式は IPYNB (Jupyter) 形式になりました
- Databricks アシスタント用の Databricks でホストされるモデルは、パブリック プレビュー中です
- AI エージェント用 Python コード実行エグゼキュータ (パブリック プレビュー)
- databricks-agents SDK 0.13.0 リリース
- 外部グループはラベルが付けられ、不変になりました
vector_search
でベクトル埋め込み入力がサポートされるようになりましたai_query
の応答形式を指定する- 同じメタストア内のコラボレーターを使用してクリーン ルームをテストする
- コンピューティング リソースをグループに割り当てる (パブリック プレビュー)
- Unity Catalog にストレージ資格情報を作成する機能をサービス プリンシパルに委任する
- バージョン 2.2 の Jobs API がリリースされました
- Unity Catalog の
MANAGE
特権 (パブリック プレビュー) - Meta Llama 3.3 がプロビジョニング済みスループット ワークロードで利用可能になりました
- ジョブ実行用のストリーミング ワークロード メトリックの表示 (パブリック プレビュー)
- Delta Live Tables パイプラインの更新のストリーミング ワークロード メトリックを表示する (パブリック プレビュー)
- Lakehouse フェデレーションが Oracle をサポート (パブリック プレビュー)
- Databricks Runtime 16.1 (ベータ版)
- サーバーレス エグレス制御を使用してサーバーレス送信ネットワーク接続を管理する
- ネットワーク アクセス イベント システム テーブルが使用可能になりました (パブリック プレビュー)
- アカウント内の個人用アクセス トークンの監視と取り消しを行う (プライベート プレビュー)
- Unity Catalog が Hive メタストアにフェデレーション可能になりました
- メタストア レベルのストレージを削除して、カタログ レベルのストレージ分離を適用する
- Meta Llama 3.3 70B Instruct がモデル サービングで使用可能になりました
- bamboolib が非推奨になりました
- 合成評価セットを使用して AI エージェントの評価を効率化する
- 履歴共有(パブリック プレビュー)を使用して、Databricks-to-Databricks Delta Sharing テーブルの読み取りパフォーマンスを向上
- 個人用アクセス トークンの最長有効期間が 730 日 (2 年) になりました
- Mosaic AI モデル トレーニング - サーバーレス予測 (パブリック プレビュー)
- モデル サービング エンドポイントに予算ポリシーを追加する
- 2024 年 11 月
- ノートブックのテーブル ヒントのメタデータを追加
- クラスターの自動更新とセキュリティとコンプライアンスの強化 UI が一般公開
- ノートブックでの Python デバッガーのサポートの拡張
- Web ターミナル エクスペリエンスが向上しました
- Delta Live Tables のクエリ履歴とクエリ プロファイルのサポート
- モザイク AI モデル トレーニングのブランド変更
- 後続の SQL セルで SQL 出力を
_sqldf
として再利用する - Azure マネージド リソースに対するサーバーレス コンピューティングサポートからのプライベート接続
- ジョブ、ノートブック、デルタ ライブ テーブルのプライベート接続のサポート
- Warehouses システム テーブルが使用可能になりました (パブリック プレビュー)
- クロスプラットフォーム ビュー共有 (パブリック プレビュー)
- Clean Rooms のパブリック プレビューは、新しい機能で解放されています
- Databricks Runtime 16.0 は GA です
- 破壊的変更: ホストされた RStudio の有効期間が終了しました
- すべての新しい Azure Databricks アカウントで有効になっている予測最適化
- 更新および統合された読み取り専用コード ブロック
- クイック修正に関する推奨事項の増加
- サポートされているすべてのモデル サービスリージョンで利用できる Foundation Model API のトークンごとの支払い
- サービス資格情報を使用した外部クラウド サービスへの Unity カタログ管理アクセス (パブリック プレビュー)
- UK Cyber Essentials Plus コンプライアンス コントロール
- モデル サービスのサーバーレス コンピューティング サポートからのプライベート接続
- Databricks Runtime 14.2 シリーズのサポート終了
- 2024 年 10 月
- シングル ユーザー コンピューティングできめ細かいアクセス制御のコスト属性を有効にする
- Databricks Assistant は SQL クエリの最適化に役立ちます
- Databricks Runtime 15.1 シリーズのサポート終了
- Foundation Model API での Llama 2 70B チャット モデルの提供終了 (トークンごとの支払い)
- メタストアを新しいワークスペースに自動的に割り当てできるようにする
- モザイク AI モデル サービスでサポートされる構造化された出力 (パブリック プレビュー)
- シングル ユーザー コンピューティングでのきめ細かなアクセス制御が一般公開
- AI Functions が EU リージョンで利用できるようになりました
- 予算ポリシーを使用したサーバーレス使用の属性 (パブリック プレビュー)
- 対象となるアカウントでサーバーレス コンピューティングが自動的に有効になる
- Databricks Assistant オートコンプリートが一般公開されました
- ノートブックの結果テーブルのフィルターが保持されるようになりました
- ノートブックのコメントの機能強化
- Databricks Runtime 16.0 (ベータ)
- モザイク AI モデル サービスでバッチ推論がサポートされるようになりました
- Databricks Apps を使用してユーザー用のセキュリティで保護されたデータと AI アプリを作成する (パブリック プレビュー)
- の改善により、変更された Python モジュールのより信頼性の高い再読み込み
autoreload
- Salesforce インジェスト コネクタの簡略化
- サーバーレス コンピューティングが追加のリージョンで使用可能
- 2024 年 9 月
- Meta Llama 3.1 405B Instruct が Databricks 関数呼び出しでサポートされるようになりました
- すべてのお客様が
vector_search()
を利用できるようになりました (パブリック プレビュー) - Meta Llama 3.2 3B モデルと 1B モデルは、モデル サービスでサポートしています
- Meta Llama 3.2 3B モデルと 1B モデルは、Foundation Model の微調整でサポートされています
- Power BI への公開が一般公開されました
@
を使用して Databricks Assistant プロンプトでテーブルを参照する- AI プレイグラウンドでのツール呼び出し GenAI エージェントのプロトタイプ作成とエクスポート
- 新しい
EXTERNAL USE SCHEMA
特権を使用して Unity Catalog 内のデータへの外部アクセスを制御する - GTE v1.5 (英語) 埋め込みモデルが Foundation Model API プロビジョニング スループットでサポートされるようになりました
- Databricks Assistant クイック修正でコードをインラインでデバッグします
- アカウントの支出を監視するための予算を作成します (パブリック プレビュー)
- Foundation Model Fine-tuning をすべての顧客が利用できるようになりました (パブリック プレビュー)
- AI Gateway がパブリック プレビューになりました
- Meta Llama 3.1 70B および 8B モデルが Foundation Model Fine-tuning でサポートされます
- AI が生成したコメントの拡張サポート
- 課金対象の使用状況テーブルでクリーン ルームの使用状況を監視
- Visual Studio Code 用の Databricks 拡張機能はGAです
- Foundation Model API でプロビジョニングされたスループットで関数呼び出しがサポートされるようになりました
- システム テーブルが一般公開されています
- 2024 年 8 月
- 新しいリソース クォータ API を使用して、クォータに対する Unity Catalog オブジェクトの使用状況を監視
- MPT 7B Instruct および MPT 30B Instruct モデルは廃止される予定です。
- AskSupport が Azure Databricks アシスタントに置き換え
- インポート可能なコスト管理ダッシュボードがアカウント コンソールに追加 (パブリック プレビュー)
- Lakeflow システム テーブルが追加の列で拡張
- Python コードの書式設定エラーの強調表示
- Delta Sharing: Python および Power BI コネクタでサポートされるその他の Delta Lake 機能
- Delta Sharing で TimestampNTZ のサポートが追加されました
- Azure Databricks ジョブ
For each
タスクは GA です - ワークスペース管理者向けの Azure RBAC アクセス許可
- Databricks Runtime 15.4 LTS は GA です
- パーソナライズされたノートブック オートコンプリート
- ワークスペース ファイルでシンボリックのサポートが開始
- Jobs Compute 用にワークスペースの既定のアクセス モードを設定する
- Databricks アシスタントの新しいスラッシュ コマンド
- ワークスペース検索でボリュームがサポートされるようになりました
- Meta Llama 3.1 405B モデルが Foundation Model Fine-tuning でサポートされる
- Databricks JDBC ドライバー 2.6.40
- Databricks の個人用アクセス トークンが 90 日以上未使用の場合、取り消されます
- クラスター API で部分的な構成の更新がサポートされるようになりました
- ノートブックのセルで行を折り返す
- Mosaic AI ベクトル検索用に同期する列の指定
- ワークスペース フォルダー内で同じファイル名を使用できなくなりました
- コンピューティング ポリシーの実施が利用可能になりました
- Foundation Model API のトークン単位の支払いが GA に
- Databricks Clean Rooms を使用してデータ プロジェクトで安全かつ非公開で共同作業する (パブリック プレビュー)
- Mosaic AI ベクトル検索が HIPAA に準拠
- ノートブックテーブルとクエリ結果テーブルの列の書式設定
- 行フィルターと列マスクが一般提供されるようになり、機能強化が行われました
- Lakehouse Federation が一般提供になりました
- 2024 年 7 月
- 同時タスクの制限の引き上げ
- ノートブックに画像を埋め込んでドラッグ アンド ドロップ
- ノートブックで利用可能なコマンド パレット
- ワークフロー システム スキーマの名前が
lakeflow
に変更されました - LakeFlow Connect (限定的なパブリック プレビュー)
- Cloudflare R2 ストレージのサポートが一般提供になりました
- システム テーブルを使用して Databricks アシスタントのアクティビティを監視する (パブリック プレビュー)
- Delta Sharing を使用したスキーマの共有の一般提供が開始されました
- Mosaic AI エージェント フレームワークは
northcentral
とcentralus
で利用できます - Databricks アシスタントはジョブに関する問題を診断できます (パブリック プレビュー)
- Databricks Git フォルダーの認証と共有の動作の更新
- クラスター ライブラリ インストールのタイムアウト
- コンピューティング プレーンの送信 IP アドレスをワークスペース IP 許可リストに追加する必要がある
- Databricks Runtime 9.1 シリーズのサポート延長
- Lakehouse Federation for SQL Server では、シングル サインオン (SSO) がサポートされています
- Delta Sharing を使用するモデル共有が一般提供になりました
- Delta Sharing を使用してコメントと主キー制約を共有する
- 新しい Databricks JDBC ドライバー (OSS)
- Databricks Runtime 15.4 LTS (ベータ版)
- Scala は Unity Catalog 共有コンピューティングに関して一般提供されています
- シングル ユーザー コンピューティングでは、きめ細かいアクセス制御、具体化されたビュー、ストリーミング テーブルがサポートされます
- ノード タイムライン システム テーブルが使用可能になりました (パブリック プレビュー)
- Meta Llama 3.1 が Model Serving でサポートされるようになりました
- ノートブック: 表示される他のセル タイトルの切り替え
- ワークスペース アセット名での
/
の使用が非推奨になりました - Delta Sharing により、リキッド クラスタリングを使用するテーブルの共有が可能
- クエリ履歴システム テーブルが利用可能 (パブリック プレビュー)
- 管理者への脆弱性スキャン レポートのメール送信
- Unity Catalog 外部テーブルのパーティション メタデータ ログ
- ワークフローのサーバーレス コンピューティングが一般提供
- ノートブックのサーバーレス コンピューティングが一般提供
- Databricks Connect for Python でのサーバーレス コンピューティングのサポート開始
- 自然言語プロンプトを使用したデータ出力のフィルター処理
- プレーンテキスト シークレットによる外部モデルのサポート
ai_forecast()
を使用した時系列データの予測- 複数ステートメントの SQL クエリを含むファイルに対する SQL ファイル タスクのサポートは GA です
- レイクハウス フェデレーションによる Salesforce Data Cloud のサポート (パブリック プレビュー)
- Databricks Assistant システム テーブルが利用可能に (パブリック プレビュー)
- Account SCIM API v2.1 (パブリック プレビュー)
- Unity Catalog メタストアごとのテーブルのリソース クォータの増大
- Databricks アシスタントによるノートブック エラーの自動診断が可能
- SQL ファイル タスクでの
:param
構文のサポートは GA です
- 2024 年 6 月
- Notebooks - 順序が正しくない構文の強調表示
- Notebooks アシスタントがエラーを自動的に診断します
- カタログ エクスプローラーの機能強化
- 単一のモデルの提供エンドポイントから複数の外部モデルを提供する
- Databricks アシスタントの一般提供
- Databricks アシスタントがスレッドにタイトルを提供
- サーバーレス ノートブック環境マネージャー
- Notebooks のデバッグ コンソール
- Azure Databricks ワークフローに定期的なスケジュールをすばやく追加する
- Databricks Runtime 15.3 が GA になります
- Azure Geographies は GA
- 改善された新しいカタログ作成 UI
- ネットワーク接続構成のサブネットの更新
- 課金システム テーブルを既定で有効化
- レイクハウス監視の一般提供開始
- Delta Sharing を使用するボリューム共有の一般提供開始
- Databricks ベクトル検索用のカスタマー マネージド キー (CMK) が GA になりました
- Mosaic AI エージェント フレームワーク (パブリック プレビュー)
- 予測最適化が GA になりました
- 提供エンドポイントでルートの最適化が利用可能
- ワークスペース ストレージ アカウント ファイアウォールを使用した Model Serving のサポート
- 列マッピングが GA になりました
- ワークフロー システム テーブルが利用可能になりました (パブリック プレビュー)
- 関数呼び出しはパブリック プレビューです
vector_search()
を使用してベクトル検索インデックスに対してクエリを実行する- Mosaic AI ベクトル検索でハイブリッド検索がサポートされるようになりました
- GTE が Model Serving でサポートされるようになりました
- Databricks Assistant: スレッドおよびクエリ エクスペリエンスが既定で有効に
- ノートブックのマークダウン エディターの強化
- ノートブックからカタログ エクスプローラー テーブルへの素早いアクセス
- Databricks ODBC ドライバー 2.8.2
- 新しい Databricks Notebook UI が一般公開されました
- 2024 年 5 月
- サーバーレス ファイアウォールの構成で、より多くのコンピューティングの種類がサポートされるようになりました
- Databricks Runtime 15.0 シリーズのサポート終了
- Databricks Runtime 15.3 (ベータ版)
- コンピューティング メトリック UI がすべての Databricks Runtime バージョンで利用できるようになりました
- ノートブックと SQL エディターの結果テーブルでの検索とフィルター処理の強化
- 新しいダッシュボードは、Databricks Marketplace プロバイダーがリスティングの使用状況を監視するのに役立ちます
Query Profile
内のシステムによって生成されたフェデレーション クエリを表示する- コンピューティング プレーンの送信 IP アドレスをワークスペース IP 許可リストに追加する必要がある
- Snowflake のレイクハウス フェデレーションでの OAuth のサポート
- ワークスペース ブラウザーからワークスペース オブジェクトを一括移動および削除
- Unity Catalog オブジェクトは最近使ったアイテムやお気に入りで利用可能
- 新しい dbt-databricks コネクタ 1.8.0 には、分離型 dbt アーキテクチャが採用されています
- 新しいコンプライアンスとセキュリティ設定 API (パブリック プレビュー)
- Databricks Runtime 15.2 が一般提供
- Delta Sharing の新しい Tableau コネクタ
- 新しいディープ ラーニング レコメンデーション モデルの例
- ストレージ資格情報と外部の場所を特定のワークスペースにバインドする (パブリック プレビュー)
- Git フォルダーが一般提供
- Unity Catalog の事前トレーニング済みモデル (パブリック プレビュー)
- Mosaic AI ベクトル検索が GA に
- Databricks アシスタント オートコンプリート (パブリック プレビュー)
- Foundation Model Training での Meta Llama 3 のサポート
- Git フォルダー UI に対する新しい変更
- 基盤モデル トレーニング (パブリック プレビュー)
- ユーザーによる結果テーブルからクリップボードへのデータ コピーが可能
- Unity Catalog オブジェクトの属性タグ値を 1000 文字にできるようになりました (パブリック プレビュー)
- 新しいプレビュー ページ
- Mosaic AI ベクトル検索の新機能
- 資格情報パススルーと Hive メタストア テーブルのアクセス制御は非推奨になりました
- Databricks JDBC ドライバー 2.6.38
- ワークスペース ストレージ アカウントのファイアウォール サポートの一般提供
- Databricks Runtime 15.2 (ベータ版)
- ノートブックで Spark Connect DataFrames の列名の検出とオートコンプリートが行われるようになりました
- 2024 年 4 月
- Databricks Runtime 15.1 が 一般提供
- Databricks アシスタント: スレッドと履歴
- Model Serving で保留中のエンドポイント更新の提供を取り消す
- Meta Llama 3 が Model Serving for Azure でサポートされるようになりました
- データ系列は、列マスクと行レベルのセキュリティを持つテーブルの読み取りをキャプチャするようになりました
- ノートブックで SQL が自動的に検出されるようになりました
- 課金対象の使用状況システム テーブルに追加された新しい列 (パブリック プレビュー)
- 列マッピングを使用するテーブルをサポートする Delta Sharing (パブリック プレビュー)
- 提供エンドポイント スキーマを取得する (パブリック プレビュー)
- ワークスペース ライブラリの作成とインストールは使用できなくなりました
- UI を使用して作成されたジョブが既定でキューに登録されるようになりました
- 提供エンドポイントからリソースへのアクセスの構成は一般提供されています
- ワークフローのサーバーレス コンピューティングは、パブリック プレビュー段階です
- Lakehouse フェデレーションでは、大文字と小文字が区別される識別子を持つ外部テーブルがサポートされます
- コンピューティングの複製で、元のコンピューティングにインストールされているライブラリが複製されるようになりました
- サーバーレス コンピューティングからのプライベート接続は一般提供されています
- OAuth アプリ登録の UI エクスペリエンス
- Delta Live Tables ノートブックの開発者エクスペリエンスの向上 (パブリック プレビュー)
- 2024 年 3 月
- DBRX ベースと DBRX の指示がモデル サービスで利用可能になりました
- モデル サービスはすべてのリージョンで HIPAA に準拠しています
- Foundation Model API のプロビジョニング済みスループットは一般提供および HIPAA に準拠しています
- MLflow で実験と実行のクォータ制限が適用されています
- ジョブ UI が Databricks アセット バンドルによってデプロイされたジョブをより適切に管理できるように更新されました
- 外部モデルのモデル プロバイダーとしてサポートされる Google Cloud Vertex AI
- 対話型ノートブックのデバッグ
- Marketplace でのプライベート エクスチェンジ プロバイダーのセルフサービス サインアップ
- Databricks Runtime 15.0 が 一般提供されています
- Databricks Repos の Git フォルダーへ変更されました
- Databricks Runtime 14.1 および 14.2 シリーズのサポート延長
- Databricks ODBC ドライバー 2.8.0
- プライベート エンドポイント ルールの管理 (パブリック プレビュー)
- Azure Databricks 担当者のワークスペース アクセス
- HIPAA では、サーバーレス コンピューティングがサポートされるようになりました
- ノートブックの SQL ウェアハウスは GA です
- Unity Catalog (パブリック プレビュー) でオブジェクトのメタデータを表示する機能を委任する
- プライベート エンドポイントのリージョンごとの新しい制限
- Databricks Runtime 15.0 (ベータ版)
- Databricks Runtime 14.0 シリーズのサポート終了
- Repos での sys.path と CWD の新しい計算
- Feature Serving が GA
- さらに多くのリージョンで予測最適化が利用可能に
- 2024 年 2 月
- 特徴エンジニアリングで Delta Live Tables を使用する (パブリック プレビュー)
- 監査ログでの PrivateLink 接続のソース IPv4 アドレス
- ジョブ所有者と実行ユーザーの設定の変更を制限する
- Databricks マネージド サービス プリンシパルのサポート
- クラスターの自動更新を有効にする (パブリック プレビュー)
- 管理者は強化されたセキュリティとコンプライアンスの機能を有効にできる (パブリック プレビュー)
- リージョン間エグレス料金を回避するための Cloudflare R2 ストレージのサポート (パブリック プレビュー)
- データの追加 UI で XML ファイル形式がサポートされる
- AI 関数を使用して Foundation Model API から生成 AI モデルを呼び出す
- Unity Catalog ボリュームが一般提供になる
- フルページの AI 搭載検索
- SQL ウェアハウスで SQL ノートブック ジョブを実行する
- Azure Databricks Jobs のファイル到着トリガーが一般提供になりました
- グローバル ワークスペース検索を使用して Unity Catalog で機械学習モデルを検索する
- Databricks Git サーバー プロキシは一般提供されています
- Databricks Git サーバー プロキシで CAN_ATTACH_TO アクセス許可が要求されなくなりました
- dbt および SQL ファイル タスクに対するワークスペース ファイル サポートは一般提供されています
- Databricks Connect for Scala の一般提供
- ボリューム内のファイルからテーブルを作成する
- Databricks Runtime 14.3 LTS は一般提供されています
- 削除ベクトルを使用するテーブルをサポートする Delta Sharing (パブリック レビュー)
- 2024 年 1 月
- ネイティブ XML ファイル形式のサポート (パブリック プレビュー)
- Databricks Marketplace (パブリック プレビュー) を使用して AI モデルを共有する
- ネットワーク セキュリティ グループ規則を更新する
- ワークスペース パスの更新
- サーバーレス コンピューティングからの Azure Storage ファイアウォールのサポートが一般提供になる
- Azure Databricks ジョブの合理化された作成
- 推論テーブルを使用するワークロードを提供する GPU モデルを監視する
- Unity Catalog 外部ボリュームへの URI パスベースのアクセス
- アップグレードされたワークスペースでアクセス制御リストを有効にできる
- Marketplace リスト イベント システム テーブルが利用可能になりました (パブリック プレビュー)
- ノートブック セルの UI を更新しました (パブリック プレビュー)
- ノートブック内の構文エラーに関するクイック修正ヘルプ
- Databricks Runtime 14.3 LTS (ベータ版)
- Delta Sharing を使用して AI モデルを共有する (パブリック プレビュー)
- Databricks Marketplace でボリュームの共有がサポートされる
- Databricks UI からウィジェットを作成する
- ウェアハウス イベント システム テーブルが使用可能 (パブリック プレビュー)
- ワークスペース ファイルのサイズ制限が 500 MB になりました
- Databricks でのレガシ Git 統合に関する機能の削除の通知
- Databricks ODBC ドライバー 2.7.7
- Databricks Runtime 13.2 シリーズのサポート終了
- AI 支援機能は既定で有効になっています
- 2023 年 12 月
- Delta Sharing を使用して動的ビューを共有する (パブリック プレビュー)
- Delta Sharing を使用してボリュームを共有する (パブリック プレビュー)
- 主キーと外部キーのエンティティ関係図
- Unity Catalog ボリューム ファイルのアップロード サイズ制限の引き上げ
- 新たなノートブック セル結果のレンダリングが利用可能 (パブリック プレビュー)
- ノートブック エディターのテーマが利用可能
- Model Serving での外部モデルのサポートはパブリック プレビュー段階です
- Databricks オンライン テーブルがパブリック プレビュー
- Repos & Git 統合設定 UI に、GitHub Enterprise Server のサポートが正しく示されるようになりました
- Databricks JDBC ドライバー 2.6.36
- init スクリプトからワークスペース ファイルを参照するためのサポート
- Feature & Function Serving がパブリック プレビュー
- Foundation Model API がパブリック プレビューに
- 新しい統合管理者設定 UI
- DBFS の Init スクリプトが終了
- レガシのグローバルおよびクラスター名付き init スクリプトの終了
- 2023 年 11 月
- Mosaic AI ベクトル検索がパブリック プレビューに
- アクセス制御リストを無効にできなくなりました
- Catalog Explorer でのボリュームに関する新しい動作とアクション
- Databricks Runtime 14.2 が 一般提供
- Databricks SQL Connector for Python バージョン 3.0.0
- 分離のない共有クラスターでサポートされているワークスペース ファイル内のライブラリ
- ワークスペース ライブラリの廃止
- Azure Confidential Computing VM の種類のサポートが一般提供になりました
- グローバル ワークスペース検索を使用して Databricks Marketplace の一覧を検索
- 外部プラットフォームを使用して Databricks Marketplace でデータ製品を使用
- 複数の Azure リージョンに対して追加されたサーバーレス SQL ウェアハウスのサポート
- Unity Catalog を新しいワークスペースで自動的に有効化する
- Databricks Runtime 14.2 (ベータ版)
- Databricks Marketplace には、Databricks ソリューション アクセラレータが含まれています
- Lakehouse Federation は Google BigQuery のサポートを追加します
- 2023 年 10 月
- Databricks SQL Serverless のセキュリティで保護されたサーバーレス接続 (パブリック プレビュー)
- Azure Databricks ジョブの YAML ソースを表示する
- Azure Databricks ワークフローに条件付きロジックを追加する
- あらゆるジョブ タスクで参照できる Azure Databricks ジョブでパラメーターを構成する
- 削除ベクトルの自動有効化
UNDROP TABLE
での Unity Catalog の一般提供- Partner Connect で Dataiku をサポート
- AutoML で生成されたノートブックが MLflow アーティファクトとして保存されるようになりました
- 新しいリージョン: カタール中部
- Azure Firewall とPrivate Link でサポートされている Unity Catalog ボリューム
- 予測最適化 (パブリック プレビュー)
- コンピューティング システム テーブルが使用可能 (パブリック プレビュー)
- オンデマンド機能の計算は GA です
- Unity Catalog の特徴エンジニアリング
- AI によって生成されたテーブル コメント (パブリック プレビュー)
- Unity Catalog のモデルは GA
- コンピューティング ポリシーでライブラリをサポート (パブリック プレビュー)
- Partner Connect が Monte Carlo をサポートする
- セマンティック検索 (パブリック プレビュー)
- ワークスペース レベルで Databricks Assistant を有効にする
- 新しい Photon のデフォルト
- Databricks Runtime 14.1 が一般提供になる
- 開発者ツールのリリース ノートが移動されました
- Visual Studio Code 用の Databricks 拡張機能がバージョン 1.1.5 に更新されました
- 更新の予測 I/O は一般提供されています
- 削除ベクトルは一般提供されています
- Partner Connect は RudderStack をサポートしています
- Databricks CLI がバージョン 0.207.0 (パブリック プレビュー) に更新されました
- ノートブックで選んだセルを実行する
- ワークスペースカタログのバインディングを使ってカタログへの読み取り専用アクセス権を付与する
- Visual Studio Code 用の Databricks 拡張機能がバージョン 1.1.4 に更新されました
- Databricks SDK for Python がバージョン 0.10.0 (ベータ版) に更新されました
- Databricks SDK for Go がバージョン 0.22.0 (ベータ版) に更新されました
- Azure China 向けパブリック プレビューの Unity Catalog ボリューム
- 2023 年 9 月
- 単一ユーザー クラスターで利用できる Lakehouse フェデレーション
- Unity Catalog にストレージ資格情報を作成する機能を委任する
- Databricks Runtime 14.1 (ベータ版)
- パブリック プレビューで LLM 用に最適化された GPU モデルの提供
- 同時実行制限に達してもジョブの実行がスキップされないようにする
- Databricks Terraform プロバイダーがバージョン 1.27.0 に更新されました
- Databricks CLI がバージョン 0.206.0 (パブリック プレビュー) に更新されました
- Databricks SDK for Go がバージョン 0.21.0 (ベータ版) に更新されました
- モデル提供エンドポイント監視用の推論テーブルはパブリック プレビューです
- Databricks ODBC ドライバー 2.7.5
- Visual Studio Code 用の Databricks 拡張機能がバージョン 1.1.3 に更新されました
- サービス プリンシパルとしてのジョブの実行を一般提供開始
- Databricks CLI がバージョン 0.205.2 (パブリック プレビュー) に更新されました
- Databricks CLI がバージョン 0.205.1 (パブリック プレビュー) に更新されました
- Databricks SDK for Go がバージョン 0.20.0 (ベータ版) に更新されました
- Databricks SDK for Python がバージョン 0.9.0 (ベータ版) に更新されました
- Databricks SDK for Python がバージョン 0.7.1 (ベータ版) に更新されました
- Databricks Terraform プロバイダーがバージョン 1.26.0 に更新されました
- Databricks Runtime 14.0 用の Databricks Connect
- レイクビュー ダッシュボードのパブリック プレビューを開始
- Scala 用 Databricks Connect V2 のパブリック プレビューを開始
- MLflow モデルの提供のパブリック プレビューを開始
- オンデマンド特徴量の計算が Unity Catalog で利用可能 (パブリック プレビュー)
- Databricks Runtime 14.0 の一般提供を開始
- アカウント メール通知をアップグレード
- Databricks Terraform プロバイダーがバージョン 1.25.1 に更新されました
- Databricks SDK for Go がバージョン 0.19.2 (ベータ版) に更新されました
- Databricks CLI をバージョン 0.205.0 に更新 (パブリック プレビュー)
/Workspace
の予約済みの場所- Databricks アセット バンドル (パブリック プレビュー)
- Databricks Terraform プロバイダーをバージョン 1.25.0 に更新
- Visual Studio Code 用の Databricks 拡張機能をバージョン 1.1.2 に更新
- Partner Connect で Snowplow をサポート
- Databricks CLI をバージョン 0.204.1 に更新 (パブリック プレビュー)
- 行フィルターと列マスクによる機密データのフィルター処理 (パブリック プレビュー)
- システム テーブルにマーケットプレース スキーマが含まれるようになりました (パブリック プレビュー)
- 価格システム テーブルが使用可能 (パブリック プレビュー)
- Databricks SDK for Go がバージョン 0.19.1 (ベータ版) に更新されました
- Databricks ODBC ドライバー 2.7.3
- Databricks CLI をバージョン 0.204.0 に更新 (パブリック プレビュー)
- Data Explorer がカタログ エクスプローラーになりました
- Databricks SDK for Go がバージョン 0.19.0 (ベータ版) に更新されました
- Databricks SDK for Python がバージョン 0.8.0 (ベータ版) に更新されました
- Unity Catalog の許可リストの特権を委任
- Repos での GitHub アプリの統合は GA です
- 2023 年 8 月
- ナビゲーション検索でテーブルを表示可能
- Databricks CLI をバージョン 0.203.3 に更新 (パブリック プレビュー)
- Databricks JDBC ドライバー 2.6.34
- Databricks SDK for Go がバージョン 0.18.0 (ベータ版) に更新されました
- Databricks SDK for Python がバージョン 0.7.0 (ベータ版) に更新されました
- Databricks Terraform プロバイダーがバージョン 1.24.1 に更新されました
- DBFS の Init スクリプトの有効期限を 2023 年 12 月 1 日まで延長
- Databricks Runtime 14.0 (ベータ版)
- 統合ナビゲーション エクスペリエンスの一般提供を開始
- Databricks Terraform プロバイダーがバージョン 1.24.0 に更新されました
- ワークスペース管理設定ページから Databricks Runtime for Genomics 設定を削除
- ワークスペース管理設定ページから Container Services 設定を削除
- Databricks CLI をバージョン 0.203.2 に更新 (パブリック プレビュー)
- Python ノートブックの関数と変数の定義に自動的に移動
- Databricks Runtime 13.3 LTS の一般提供を開始
- Unity Catalog を使用したタグの概要
- Unity Catalog 共有クラスターでの init スクリプト、JAR、Maven 座標の許可リストはパブリック プレビュー段階です
- init スクリプトと JAR のボリュームのサポートはパブリック プレビュー段階です
- Databricks Repos .ipynb ファイル出力コミットを簡素化
- Databricks Repos での IPYNB ノートブックのサポートを一般提供開始
- Databricks SDK for Go がバージョン 0.17.0 (ベータ版) に更新されました
- Databricks SDK for Python がバージョン 0.6.0 (ベータ版) に更新されました
- Databricks CLI をバージョン 0.203.1 に更新 (パブリック プレビュー)
- 統合スキーマ ブラウザーの一般提供が開始されました
- スクリプトまたはテンプレートで ID をエンコードする場合、サーバーレス サブネットの変更の影響を受ける可能性があります
- Databricks SDK for Go がバージョン 0.16.0 (ベータ版) に更新されました
- Partner Connect で Census をサポート
- カスタマー マネージド キーで Azure Key Vault マネージド HSM キーのサポートを開始
- Databricks SDK for Python がバージョン 0.5.0 (ベータ版) に更新されました
- ワークスペース ファイルのプログラムによる書き込みのサポート
- Databricks CLI をバージョン 0.203.0 に更新 (パブリック プレビュー)
- Databricks Terraform プロバイダーがバージョン 1.23.0 に更新されました
- 変更が可能になったグループ名
- Databricks SDK for Go をバージョン 0.15.0 (ベータ版) に更新
- Databricks SDK for Python をバージョン 0.4.0 (ベータ版) に更新
- サード パーティ製 iFraming 防止の構成設定が削除されました
- Visual Studio Code 用の Databricks 拡張機能をバージョン 1.1.1 に更新
- LangChain が 13.1 以降で利用可能
- Unity Catalog の特徴量エンジニアリングのパブリック プレビューを開始
- 継続的なジョブの失敗の繰り返しに対するエラー処理の改善
- サーバーレス SQL ウェアハウスが追加のリージョンで使用可能
- Delta Sharing を使用したスキーマの共有 (パブリック プレビュー)
- Azure Databricks ジョブでのタスクの条件付き実行
- Databricks Terraform プロバイダーをバージョン 1.22.0 に更新
- 強化されたセキュリティおよびコンプライアンス機能
- レイクハウス監視のパブリック プレビューを開始
- Databricks Runtime 13.3 LTS (ベータ版)
- 新しい Git 操作の一般提供: ブランチのマージ、リベース、競合解決を使用したプル
- 2023 年 7 月
- ワークスペース管理者によるアカウント グループの作成が可能
- グループ マネージャー ロールのパブリック プレビューを開始
- Databricks CLI をバージョン 0.202.0 に更新 (パブリック プレビュー)
- Databricks SDK for Python をバージョン 0.3.0 (ベータ版) に更新
- Databricks SDK for Go をバージョン 0.14.1 (ベータ版) に更新
- Databricks SDK for Go をバージョン 0.14.0 (ベータ版) に更新
- Azure Databricks ジョブで別のジョブをタスクとして実行
- ワークスペース ネットワーク更新に UI サポートを追加 (GA)
- すべてのユーザーが既定で Databricks Marketplace のデータ製品にアクセス可能
- クラシック キーボード ショートカット モード
- Lakehouse Federation を使用すると、外部データベース プロバイダーに対してクエリを実行可能 (パブリック プレビュー)
- リポジトリで [ゴミ箱に移動] を有効化
- 実行速度が遅いか、スタックしたジョブのアラートを作成
- Databricks SDK for Go をバージョン 0.13.0 (ベータ版) に更新
- Databricks SDK for Python をバージョン 0.2.0 (ベータ版) に更新
- Databricks CLI をバージョン 0.201.0 に更新 (パブリック プレビュー)
- Databricks SDK for Python をバージョン 0.2.1 (ベータ版) に更新
- Databricks Assistant のパブリック プレビューを開始
- アカウントからユーザーとサービス プリンシパルを非アクティブ化
- ID プロバイダーで非アクティブ化されたユーザーをアカウント レベルの SCIM プロビジョニングで非アクティブ化
- ごみ箱ディレクトリへの管理者のアクセス
- MIME の種類のスニッフィングと XSS 攻撃ページ レンダリングの防止が常時有効
- Unity Catalog ボリュームのパブリック プレビューを開始
- ワークスペースから製品フィードバックを送信するためのシンプル エクスペリエンス
- Visual Studio Code 用の Databricks 拡張機能をバージョン 1.1.0 に更新
- 関数が Catalog Explorer に表示されるようになりました (パブリック プレビュー)
- Databricks Terraform プロバイダーをバージョン 1.21.0 に更新
List all jobs
とList job runs
API 要求の最大オフセットが制限されるようになりました- Databricks Runtime 13.2 の一般提供を開始
- Delta Sharing と Databricks Marketplace でビューの共有をサポート (パブリック プレビュー)
- DBFS の Init スクリプトが 2023 年 9 月 1 日に終了
- 2023 年 6月
- Databricks Terraform プロバイダーをバージョン 1.20.0 に更新
- Databricks CLI がバージョン 0.200.1 (パブリック プレビュー) に更新されました
- Databricks SDK for Go がバージョン 0.12.0 (ベータ版) に更新されました
- Databricks SDK for Go がバージョン 0.11.0 (ベータ版) に更新されました
- Databricks SDK for Python (ベータ版)
- Databricks SDK for Go (ベータ版)
- 監査ログ、課金対象の使用状況、系列システム テーブルへのアクセス (パブリック プレビュー)
- Unity Catalog のモデル (パブリック プレビュー)
- Databricks Marketplace が GA になりました
- Databricks Runtime 13.2 (ベータ版)
- Visual Studio Code 用の Databricks 拡張機能 (一般提供)
- テンプレートなしで Azure CLI と PowerShell を使用してカスタマー マネージド キーを有効にする
- 有効にしたバックエンド Azure Private Link を使用して動作するサーバーレス SQL ウェアハウス
- Azure Databricks Jobs UI で完了したジョブの実行の概要を視覚的に確認する
- Databricks CLI (パブリック プレビュー)
List all jobs
およびList job runs
API 要求からの結果の改ページ位置の自動修正を改善- ページ全体のワークスペース ブラウザには Repos が含まれています
- Databricks Terraform プロバイダーがバージョン 1.19.0 に更新されました
- サービス プリンシパルとしてジョブを実行する (パブリック プレビュー)
- 新しいサービス プリンシパル UI で、より優れた管理エクスペリエンスを提供
- ユーザーがワークスペースに再追加された際にホーム フォルダーが復元される
- Databricks Marketplace: プライベート エクスチェンジが利用可能になりました
- Databricks Marketplace: コンシューマーは UI を使用してデータ製品をアンインストールできます
- Databricks Marketplace: プロバイダーは独自のプロファイルを作成できます
- Python 用 Databricks Connect V2 の一般提供
- Databricks Terraform プロバイダーがバージョン 1.18.0 に更新されました
- 新しい Databricks Marketplace プロバイダー
- Databricks Runtime 13.1 が 一般提供
- 統合スキーマ ブラウザーを使用してノートブック、SQL エディター、およびカタログ エクスプローラーからデータを表示する (パブリック プレビュー)
- 2023 年 5 月
- テーブル UI を作成または変更すると、Avro、Parquet、およびテキスト ファイルのアップロードがサポートされます
- データの追加 UI を使用して、Unity Catalog の外部の場所を使用してデータを読み込む (パブリック プレビュー)
- SQL ウェアハウスで Databricks ノートブックを実行する (パブリック プレビュー)
- Enter キーによるオートコンプリート候補の確定を防ぐ
- 新しいリージョン: 中国東部 3
- Azure Confidential Computing VM の種類のサポート (パブリック プレビュー)
- Databricks Terraform プロバイダーがバージョン 1.17.0 に更新されました
- データ UI をアップロードすると、新しい列のデータ型がサポートされます
- 特定のワークスペースへのUnity Catalog のカタログのバインド
- すべてのユーザーが Partner Connect を使用して Fivetran に接続可能 (パブリック プレビュー)
- Databricks Terraform プロバイダーがバージョン 1.16.1 に更新されました
- Databricks JDBC ドライバー 2.6.33
- Partner Connect では Alation がサポートされます
- エディターの新しい既定のテーマ
- Databricks Terraform プロバイダーがバージョン 1.16.0 に更新されました
- Azure マネージド ID の Unity Catalog サポートが GA になりました
- Databricks Runtime 13.1 (ベータ版)
- Azure Databricks ワークフローでファイル ベースの SQL クエリを実行
- Databricks Terraform プロバイダーがバージョン 1.15.0 に更新されました
- Azure China リージョンで Unity Catalog がサポート開始
- アカウント コンソールでアカウントのニックネームを使用できるようになりました
- Delta Sharing を使用したノートブックの共有
- Azure Databricks でサーバーレス スターター SQL ウェアハウスが作成されなくなりました
- SQL Warehouses API では、サーバーレス コンピューティングの有効化を明示的に指定する必要があります
- サーバーレス SQL ウェアハウスのワークスペース設定の変更
- アカウントとワークスペースのサーバーレス コンピューティング設定の変更
- Databricks SQL Serverless が GA
- セキュリティで保護されたクラスター接続または Azure Private Link を使用した既存のワークスペースのアップグレード (パブリック プレビュー)
- DBFS のクラスター スコープの init スクリプトの非推奨化
- 統合ナビゲーション (パブリック プレビュー)
- 2023 年 4 月
- Databricks Marketplace (パブリック プレビュー): データ、分析、AI 向けのオープン マーケットプレース
- Python フォーマッタの構成
- ワークスペース ファイルが GA
- クラスター スコープの init スクリプトをワークスペース ファイルに格納できるようになりました
- サービス プリンシパルを使用した Azure Key Vault でサポートされるシークレット スコープの作成
- 新しい Delta Sharing の権限により、共有、受信者、およびプロバイダー管理タスクの委任が可能
- Databricks Connect V2 (パブリック プレビュー)
- 新しいクラスター メトリック UI
- Databricks Runtime 13.0 が GA
- IP アドレスの範囲によるアカウント コンソールへのアクセスの制御 (パブリック プレビュー)
- Databricks Terraform プロバイダーがバージョン 1.14.3 に更新されました
- ワークスペースの変更された管理者設定の診断ログ エントリ
- マネージド ディスクの初期カスタマー マネージド キーの場合、Azure Databricks はコンピューティング リソースを終了するようになりました
- Databricks Terraform プロバイダーがバージョン 1.14.1 および 1.14.2 に更新されました
- SQL ユーザー設定と全般的なユーザー設定を統合
- レガシ ノートブックの視覚化は非推奨となりました
- [ファイルのアップロードからテーブルを作成または変更する] ページで JSON ファイルのアップロードをサポート
- 2023 年 3 月
- Databricks Terraform プロバイダーがバージョン 1.14.0 に更新されました
- Databricks Runtime 7.3 LTS ML のサポート終了
- TorchDistributor を使用した分散トレーニング
- Databricks Runtime 13.0 (ベータ版)
- ファイル エディターの強化
- 既存の Azure Databricks ワークスペースの DBFS ルート ストレージ冗長性を変更
- Repos での .ipynb (Jupyter) ノートブックのサポート (プレビュー)
- reload4j のサポート
- 東アジア リージョンの新しい IP アドレス
- ノートブック内の SQL セルを並列で実行
- Git リポジトリに格納されている Python コードを使用したジョブ タスクの作成
- Databricks Terraform プロバイダーがバージョン 1.13.0 に更新されました
- Databricks Terraform プロバイダーがバージョン 1.12.0 に更新されました
- SQL 管理コンソールとワークスペース管理コンソールの統合
- モデルの提供が GA
- 特徴の自動検索の一般提供を開始
- UDR を使用する新しいワークスペースの場合、Azure Storage IP には追加の UDR が必要です
- Azure Databricks DBFS ルート ストレージでは、新しいワークスペースに Azure Data Lake Storage Gen2 が使用されます
- 新しいカタログ エクスプローラーの可用性
- [分析情報] タブを使用してテーブルの頻繁なクエリとユーザーを表示
- 完全一致検索がグローバル検索で使用可能
- Azure Databricks ジョブの系列情報の表示
- Databricks Runtime 12.2 LTS、Databricks Runtime 12.2 LTS ML が GA
- ワークスペース ファイルがパブリック プレビューになりました
- 2023 年 2 月
- ND A100 v4 シリーズのインスタンスのサポート (パブリック プレビュー)
- Azure Databricks での Ray (パブリック プレビュー)
- ノートブック セルの出力結果の制限の引き上げ
- Azure Databricks ジョブで継続的なジョブの実行がサポートされるようになりました
- 新しいファイルが到着したときに Azure Databricks ジョブをトリガー
- Databricks Terraform プロバイダーがバージョン 1.10.0 に更新されました
- レガシ グローバル init スクリプトとクラスター名付き init スクリプトが無効化
- MLflow 実験 UI の機能強化
- Databricks Runtime 12.2 (ベータ版)
- ユーザー割り当てマネージド ID を使用して Unity Catalog のストレージにアクセスする (パブリック プレビュー)
- Visual Studio Code 用の Databricks 拡張機能 (パブリック プレビュー)
- サーバーレス リアルタイム推論のパブリック プレビューをすべてのお客様が利用可能
- サーバーレス SQL ウェアハウスは、サポートされているリージョンのワークスペースで使用可能 (パブリック プレビュー)
- Databricks Terraform プロバイダーがバージョン 1.9.2 に更新されました
- カスタマー マネージド キーは、一部の種類のデータへのアクセスを保護および制御するのに役立ちます (GA)
- Azure Databricks ノートブックの変数エクスプローラー
- 2023 年 1 月
- Azure Private Link を使用してプライベート接続を有効にする (GA)
- アカウント SCIM が GA になりました
- UI での Azure Databricks ジョブの簡単な作成と編集
- ジョブの実行を表示するときの Azure Databricks Jobs UI の機能強化
- 新しいアカウント コンソールのホーム画面では、アカウント管理エクスペリエンスが向上します
- Databricks Terraform プロバイダーがバージョン 1.9.1 に更新されました
- アカウント ユーザーは、アカウント コンソールでメール設定を更新できます
- リージョンのサポートを 1 ページに統合
- Databricks Runtime 12.1 と Databricks Runtime 12.1 ML の一般提供
- クラスター ポリシーで、ユーザーあたりのクラスターの最大数の制限がサポートされるようになりました
- Databricks Terraform プロバイダーがバージョン 1.9.0 に更新されました
- サーバーレス SQL ウェアハウスは、米国中部リージョンと北ヨーロッパ リージョンで利用できます
- Partner Connect による Privacera への接続のサポート
- Databricks Terraform プロバイダーがバージョン 1.8.0 に更新されました
- Databricks Runtime 12.1 (ベータ版)
- Partner Connect では Sigma がサポートされます
- Databricks ノートブックの新しい左右のサイドバー
- 2022 年 12 月
- Databricks SQL Driver for Go が一般公開されています
- ワークスペースの同時更新を防止する
- 新しい Azure リージョン: 中国北部 3
- Databricks Terraform プロバイダーがバージョン 1.7.0 に更新されました
- Databricks Runtime 12.0 および 12.0 ML は GA です
- ジョブがグローバル検索で使用できるようになりました (パブリック プレビュー)
- 課金対象の使用状況グラフを個々のタグで集計できるようになりました
- SQL を使用して、Unity Catalog マネージド テーブルのスキーマ レベルとカタログ レベルのストレージの場所を指定する
- Unity Catalog を使用した系列データのキャプチャが一般公開されました
- Databricks ODBC ドライバー 2.6.29
- Databricks JDBC 2.6.32 2.6.32
- Partner Connect による AtScale への接続のサポート
- 2022 年 11 月
- Azure Databricks ジョブの強化された通知 (パブリック プレビュー)
- Databricks Runtime 12.0 (ベータ版)
- サーバーレス SQL ウェアハウスからのアクセスを許可するように Azure Storage ファイアウォールを構成する
- 管理者設定を使用してデータのアップロード UI を無効にできるようになりました
- Unity Catalog のパートナー接続サポートは GA です
- スパース チェックアウトを使用して大規模なリポジトリを操作する
- Databricks Terraform プロバイダーがバージョン 1.6.5 に更新されました
- 米国西部リージョンにサーバーレス SQL ウェアハウスを作成する
- Databricks Terraform プロバイダーがバージョン 1.6.3 および 1.6.4 に更新されました
- Unity Catalog マネージド テーブルのクラウド ストレージの場所をカタログ レベルとスキーマ レベルで指定する
- ワークスペースの上部バーにある検索フィールドから最近使用したオブジェクトにアクセスする
- [ファイルのアップロードからテーブルを作成または変更する] ページで複数のファイルをサポート
- [ファイルのアップロードからテーブルを作成または変更する] ページで上書きをサポート
- Jobs API 2.1 を使用して名前でジョブを検索する
- Databricks Terraform プロバイダーがバージョン 1.6.2 に更新されました
- Unity Catalog でのテーブルの検索は GA です
- 2022 年 10 月
- GA: ノートブック以外のファイルに対するリポジトリのサポート
- マネージド ディスク暗号化用のカスタマー マネージド キー
- Delta Live Tables ノートブックを使用してストリーミング推論用のモデルをデプロイする
- データ追加 UI から Fivetran に接続する
- Databricks SQL Driver for Node.js の一般提供
- Partner Connect では、erwin Data Modeler by Quest への接続がサポートされています
- Azure Cosmos DB に対する Databricks Feature Store のサポート (パブリック プレビュー)
- ワークスペースにユーザー分離クラスター型の種類を適用する
- Databricks Runtime 11.3 LTS および 11.3 LTS ML は GA です
- ノートブックでの Python コードの書式設定 (パブリック プレビュー)
- サービス プリンシパルは、Azure Databricks アカウントへの API 専用アクセスを提供します
- パーソナル コンピューティング クラスター ポリシーは、既定ですべてのユーザーが使用できます
- データの追加UIには、Azure Databricks にデータを読み込むための中央 UI が用意されています
- [ファイルのアップロードからテーブルを作成または変更する] ページに、小さなファイルを Delta Lake にアップロードするためのエクスペリエンスを統合
- Partner Connect による Hevo Data への接続のサポート
- 分離なし共有クラスターの管理者保護を有効にする
- 新しい検索エクスペリエンスと統合された SQL ペルソナ
- Unity Catalog でサポートされるようになった特権の継承
- UI の上部のナビゲーション バー
- Databricks Runtime 11.3 (ベータ版)
- アカウント コンソールは複数の言語で使用できます
- 2022 年 9 月
- 自然言語処理向けの新しいリファレンス ソリューション
- Unity Catalog のその他のリージョン
- UI の上部のナビゲーション バー
- 監査ログに Web ターミナルのイベントが含まれるようになりました
- 監査ログに、Git リポジトリの資格情報を管理するためのイベントが含まれるようになりました
- Delta Live Tables UI でクラスター ポリシーを直接選択する
- ワークスペース ランディング ページの新しいデータ トラフォーム カード
- Azure Databricks ワークフローでの Databricks SQL タスクの調整 (パブリック プレビュー)
- Delta キャッシュがディスク キャッシュになりました
- Unity Catalog を使用して系列データをキャプチャおよび表示する (パブリック プレビュー)
- Catalog Explorer を使用してテーブルを検索する (パブリック プレビュー)
- ワークスペース ブラウザーでペルソナにわたって資産を表示および整理する
- Databricks Runtime 11.2 および 11.2 ML が GA になりました
- 2022 年 8 月
- アカウント ユーザーはアカウント コンソールにアクセスできます
- Databricks ODBC ドライバー 2.6.26
- Databricks JDBC ドライバー 2.6.29
- Databricks Feature Store クライアントが PyPI で使用可能になりました
- Unity Catalog が GA
- Delta Sharing が GA
- Databricks Runtime 11.2 (ベータ版)
- 継続的パイプラインの Delta Live Tables UI でのメッセージ量の削減
- Delta Live Tables パイプラインのクラスター構成がより簡単に
- Databricks ワークフローでの dbt タスクの調整 (パブリック プレビュー)
- ID フェデレーションが GA です
- Partner Connect では Stardog への接続がサポートされます
- Databricks Feature Store とサーバーレス リアルタイム推論の統合
- Databricks Feature Store の特徴の自動検索での追加のデータ型のサポート
- 独自のキーを持ち込む: Git 資格情報を暗号化する
- クラスター UI がプレビューになり、セキュリティ モードがアクセス モードによって置き換えられる
- Unity Catalog の制限事項 (パブリック プレビュー)
- パブリック プレビューでのサーバーレス リアルタイム推論
- ワークスペース検索の改善が GA になりました
- Delta Live Tables データセットの作成時に、生成された列を使用する
- モナコベースのエディターを使用したノートブックの編集の改善 (試験段階)
- Databricks Runtime 10.3 シリーズのサポート終了
- Azure Private Link を使用してプライベート接続を有効にする (パブリック プレビュー)
- ワークスペースのサーバーレス SQL ウェアハウスを有効にする (パブリック プレビュー)
- Delta Live Tables では、選択されたテーブルのみをパイプライン更新で更新できるようになりました
- ジョブの実行がクラスター ライブラリのインストール完了を待機するようになりました
- 2022 年 7 月
- 2022 年 6 月
ALTER TABLE
Unity Catalog のアクセス許可の変更- Databricks Runtime 6.4 延長サポートがサポート終了に到達
- Databricks Runtime 10.2 シリーズのサポート終了
- Databricks ODBC ドライバー 2.6.24
- Databricks Terraform プロバイダーが GA になりました
- Databricks Runtime 11.0 と 11.0 ML は GA、11.0 Photon はパブリック プレビュー
- Databricks Runtime 11.0 でのリポジトリの既定の作業ディレクトリに対する変更
- Databricks Runtime 10.1 シリーズのサポート終了
- Delta Live Tables で SCD タイプ 2 がサポートされるようになりました
- Azure Databricks UI での Delta Live Tables パイプラインの直接作成
- パイプラインを作成または編集する際の Delta Live Tables チャネルの選択
- タスク値を使用して Azure Databricks ジョブ内のタスク間で通信する
- Databricks UI でのアカウント切り替えを有効化
- 2022 年 5 月
- タブとウィンドウの間でノートブックのセルをコピーして貼り付ける
- Databricks Feature Store の特徴の自動検索での追加のデータ型のサポート
- Databricks Runtime 11.0 (ベータ版)
- ワークスペース検索の改善 (パブリック プレビュー)
- Python を使用して Python ノートブックで SQL セルの結果をネイティブに調べる
- Databricks Repos: リポジトリ内の他のファイルのサポート
- Databricks Repos: MLflow 実験のデータ損失に関する問題の修正
- 新しい Azure のリージョン: 米国中西部
- アップグレード ウィザードを使用すると、データベースと複数のテーブルを Unity Catalog に簡単にコピーできます (パブリック プレビュー)
- Power BI Desktop システム全体での HTTP プロキシのサポート
- ノートブック コマンドの実行時に監査ログを記録できるようになりました
- Databricks Runtime 10.5 と 10.5 ML は GA、10.5 Photon はパブリック プレビュー
- Databricks JDBC ドライバー 2.6.25
- Delta Live Tables UI でパイプラインが実行されているユーザーを確認する
- 2022 年 4 月
- 新しい Azure リージョン: スウェーデン中部
- タグを使用して Azure Databricks ジョブをより適切に管理する
- Databricks Runtime 10.0 シリーズのサポート終了
- 新しいジョブ マトリックス ビューを使用してジョブの実行の視覚的な概要を取得する
- Azure Databricks ジョブの実行が失敗したときに時間とリソースを節約する
- ジョブ タスクの実行履歴を表示する
- 単一ユーザー アクセスが存在しなくなったときに、ジョブ UI で新しいクラスターを割り当てる
- Databricks Runtime 10.5 (ベータ版)
- Delta Live Tables UI が強化され、承認されていないアクションが無効になる
- AutoML は一般公開されています
- AutoML で Unity Catalog のデータセットを使用する
- Delta Live Tables は AWS と Azure の GA であり、GCP ではパブリック プレビュー段階である
- Delta Live Tables SQL インターフェイス: テーブル名への非破壊的変更
- 2022 年 3 月
- Databricks の自動スケーリングが強化された Delta Live Tables パイプラインのパフォーマンスとコストの向上
- Files in Repos は、新しいワークスペースで既定で有効になっています
- Databricks Feature Store の一般提供
- 実験ページから実験を共有する
- RStudio Workbench のバグ修正
- 新しいワークスペース言語オプション
- Databricks Runtime 10.4 LTS と 10.4 LTS ML は GA、10.4 Photon はパブリック プレビュー
- Unity Catalog がパブリック プレビューで利用可能
- 差分共有がパブリック プレビューで利用可能
- 管理サービスのためのカスタマー マネージド キーのローテーション
- Delta Live Tables パイプラインのアクセス制御の強化
- 新しい
channel
設定で Delta Live Tables プレビュー機能をテストする (パブリック プレビュー) - Delta Live Tables Python 関数のエラー処理の改善 (パブリック プレビュー)
- Databricks Repos の機能強化
- クラスター ポリシーの変更に関する診断ログ
- Databricks Runtime 10.4 (ベータ版)
- 2022 年 2 月
- Delta Live Tables パイプラインのスケジューリングの簡素化 (パブリック プレビュー)
- Delta Live Tables パイプラインの更新の履歴を簡単に参照する (パブリック プレビュー)
- ジョブ API 今すぐ実行要求のジョブべき等を保証する
- ジョブ サービスの安定性とスケーラビリティの向上
- 異なる実験からの MLflow の実行を比較する
- MLflow 比較実行の表示の機能強化
- クラスター UI でのジョブ実行所有者の可視性の向上
- AutoML でデータセット列をドロップする
- 実験ページは GA
- Delta Live Tables Python インターフェイスでの一時テーブルのサポート
- Delta Live Tables のユーザー インターフェイスの機能強化 (パブリック プレビュー)
- Databricks Runtime 9.0 シリーズのサポート終了
- Data Science & Engineering のランディング ページの更新
- Git 統合のための AWS CodeCommit のサポートを Databricks Repos に追加
- Delta Live Tables パイプラインの視覚化の向上 (パブリック プレビュー)
- 更新された Markdown パーサー
- Delta Live Tables で変更データ キャプチャ処理がサポートされるようになりました (パブリック プレビュー)
- 複数のリージョンで追加のメタストアを使用できるようになりました
- AutoML で使用するアルゴリズム フレームワークの選択
- Databricks でホストされる MLflow モデルでオンライン ストアから特徴を検索できるようになりました
- Databricks Runtime 10.3 と 10.3 ML は GA、10.3 Photon はパブリック プレビュー
- 2022 年 1 月
- Azure Databricks での MLflow モデル レジストリ Webhook (パブリック プレビュー)
- 破壊的変更: クラスターの終了時にクラスターのべき等性トークンがクリアされる
- Databricks Runtime 10.3 (ベータ版)
- 最近のジョブの実行に関する情報を表示する
- Databricks Repos ファイル エディターで Markdown を使用する
- 複数のタスクを調整するジョブに関する改善されたクラスター管理
- Databricks Runtime 8.3 と Databricks Runtime 8.4 シリーズのサポート終了
- Databricks JDBC ドライバー 2.6.22
- 複数のリージョンで追加のメタストアを使用できるようになりました
- [新しい共有] ボタンがノートブックの [アクセス許可] アイコンに置き換わる
- 新しいワークスペース言語オプション
- 複数のリージョンで追加のメタストアを使用できるようになりました
- 2021 年 12 月
- Databricks Runtime 6.4 延長サポート シリーズ サポート終了日の延長
- Databricks Runtime 5.5 延長サポート シリーズがサポート終了に到達
- Databricks JDBC ドライバー 2.6.21
- Databricks Connector for Tableau 2021.4
- Databricks Runtime 10.2 と 10.2 ML は GA、10.2 Photon はパブリック プレビュー
- スイス西部リージョンを利用できるようになりました
- 更新された Markdown パーサー
- Delta Live Tables のユーザー インターフェイスの機能強化
- 追加のメタストアが近日中に複数のリージョンに公開される
- オーストラリア南東部リージョンの SCC リレーを更新する
- Databricks Runtime 8.3 シリーズのサポート延長
- Databricks Runtime 10.2 (ベータ版)
- クラスター作成のために、環境変数の値 $ からエスケープと引用符を削除した最新の破壊的変更を元に戻す
- 2021 年 11 月
- 機能テーブルのタグを作成する (パブリック プレビュー)
- Python セルでの構文の強調表示と SQL コマンドのオートコンプリート
- 実験ページからの MLflow 実験の名前変更、削除、およびアクセス許可変更 (パブリック プレビュー)
- ノートブックの新しいデータ プロファイル: 表形式とグラフィック形式のデータ概要 (パブリック プレビュー)
- Delta Live Tables パイプラインの実行中のスキーマの展開時のログ記録の向上
- Databricks パートナー Connect GA
- 破壊的変更: クラスター作成のために、環境変数の値 $ からエスケープと引用符を削除する
- Repos のファイルの使いやすさの向上
- レガシ SQL ウィジェットのサポートは 2022 年 1 月 15 日に終了します
- Azure Databricks ジョブのユーザー インターフェイスの機能強化
- Power BI 用の差分共有コネクタ
- Databricks ODBC ドライバー 2.6.19
- Databricks Runtime 10.1 と 10.1 ML は GA、10.1 Photon はパブリック プレビュー
- Databricks Runtime 10.1 (ベータ版)
- MLflow 実験の名前変更と削除 (パブリック プレビュー)
- 既存のポリシーを複製することでクラスター ポリシーを作成する
- ノートブックとノートブックのセルの既定の言語をより簡単に変更
- Web ターミナルから Repos のファイルを使用する
- 2021 年 10 月
- Databricks Runtime 8.2 シリーズのサポート終了
- Databricks Runtime 10.0 と 10.0 ML は GA、10.0 Photon はパブリック プレビュー
- Delta Live Tables のユーザー インターフェイスの機能強化 (パブリック プレビュー)
- Delta Live Tables で新しいパイプラインを作成するときに、固定サイズのクラスターを指定する (パブリック プレビュー)
- Delta Live Tables でトリガーされたパイプラインのテーブルのデータ品質メトリックを表示する (パブリック プレビュー)
- ジョブ オーケストレーションが GA になりました
- Databricks Connector for Power BI
- Repos で任意のファイルの種類がサポートされるようになりました
- Jobs API を使用したジョブ実行の詳細な出力
- Jobs UI でのノートブック パスの読みやすさの向上
- 新しいタブまたはウィンドウで Delta Live Tables パイプラインを開く
- SQL のレガシ入力ウィジェットでの
$
に対する新しいエスケープ シーケンス - 自動的に生成されたバッチ推論ノートブックを使用した迅速なモデルのデプロイ
- 2021 年 9 月
- Databricks Runtime 10.0 (ベータ版)
- Databricks ODBC ドライバー 2.6.18
- 既存のワークスペースでの暗号化用カスタマー マネージド キーの使用
- Databricks Runtime 9.1 LTS と 9.1 LTS ML は GA、9.1 LTS Photon はパブリック プレビュー
- Databricks Runtime 8.1 シリーズのサポート終了
- Databricks JDBC ドライバー 2.6.19
- ワークスペース間で機能テーブルを共有する
- 複数の Azure GPU インスタンスの種類の一般提供
- Repos で
.gitignore
がサポートされるようになりました - すべてのワークスペースで拡張ジョブ UI が標準になりました
- Databricks Runtime 9.1 (ベータ版)
- Azure Databricks ジョブの設定管理の合理化
- すべてのワークスペースで Databricks SQL パブリック プレビューが利用可能に
- Feature Store から機能テーブルを削除する
- Delta Live Tables UI で、パイプラインの表示のアクセス許可を付与する (パブリック プレビュー)
- Delta Live Tables を使用してクラスター リソースの使用量を削減する (パブリック プレビュー)
- Delta Live Tables パイプラインで MLFlow モデルを使用する (パブリック プレビュー)
- Delta Live Tables パイプラインを名前で検索する (パブリック プレビュー)
- Azure Databricks ジョブで PyTorch TorchScript とその他のサードパーティ ライブラリのサポートを開始しました
- Databricks Runtime 8.0 シリーズのサポート終了
- 2021 年 8 月
- Databricks Repos GA
- 長時間実行されるノートブック ジョブのタイムアウトの増加
- ジョブ サービスの安定性とスケーラビリティの向上
- グループ メンバーシップによって付与されたユーザーの権利が管理コンソールに表示される
- MLflow 実験のアクセス許可の管理 (パブリック プレビュー)
- ノートブックからのジョブ作成の向上
- Ddsv4 シリーズの VM (パブリック プレビュー)
- ノートブックの見出しの折りたたみに関するサポートの強化
- Databricks Runtime 9.0 と 9.0 ML は GA、9.0 Photon はパブリック プレビュー
- Databricks Runtime 9.0 (ベータ版)
- Databricks CLI を使用してプログラムでリポジトリを管理する (パブリック プレビュー)
- Databricks REST API を使用してプログラムでリポジトリを管理する (パブリック プレビュー)
- Databricks Runtime 7.6 シリーズのサポート終了
- Databricks Repos を操作すると監査イベントがログに記録される
- ジョブの作成と管理のワークフローの向上
- Photon ランタイムが利用可能になりました (パブリックプレビュー)
- Git 資格情報を設定するための簡単な手順 (パブリックプレビュー)
- 複数のノートブックを
.html
形式でインポートする - Delta Live Tables の使いやすさの向上
- 2021 年 7 月
- Databricks REST API を使用して MLflow 実験のアクセス許可を管理する
- Azure Databricks Web インターフェイスがポルトガル語とフランス語にローカライズされました (パブリック プレビュー)
- Databricks Runtime 5.5 LTS for Machine Learning のサポートは終了し、延長サポート バージョンに置き換えられました
- Databricks Light 2.4 のサポートは 9 月 5 日に終了し、延長サポート バージョンに置き換えられました
- 新しい Azure リージョン: ドイツ中西部
- Databricks Feature Store UI で機能の更新に関する情報が利用可能 (パブリック プレビュー)
- 結果を最大 10,000 行まで表示
- フォルダー内のノートブックを一括インポートして、ソース ファイルとしてエクスポート
- SQL notebook のオートコンプリートで、SQL キーワードにすべて大文字が使用されるようになりました
- 順序変更可能およびサイズ変更可能なノートブック内のウィジェット
- Azure Databricks UI のユーザビリティの修正
- 新しい Delta Live Tables パイプラインを作成するときにパイプライン設定をすばやく定義する
- Databricks Runtime 8.4 と 8.4 ML は GA、8.4 Photon はパブリック プレビュー
- Delta Live Tables Python API での Spark SQL の使用
- Azure Databricks ジョブを使用したデータ処理と分析の強化 (パブリック プレビュー)
- Delta Live Tables の既定のクラスターのコスト削減 (パブリック プレビュー)
- Delta Live Tables UI でパイプラインを名前で並べ替える (パブリック プレビュー)
- [コンピューティング] ページの変更
- Databricks Runtime 5.5 LTS のサポートが終了し、2021 年の終わりまでに Databricks Runtime 5.5 拡張サポートに置き換えられる
- Repos API (パブリック プレビュー)
- Databricks Runtime 8.4 (ベータ版)
- 2021 年 6 月
- 修正: Git の Repos が一部のリージョンの新規および既存のワークスペースで既定で有効化
- 機能ストアのアクセス許可への変更
- MLflow 実行テーブルの結果へのアクセスが改善
- Delta Live Tables のコストの可視性の向上
- Delta Live Tables のデータ品質制約の強化
- IP アドレス一覧の更新と置き換えに関する API の変更
- Databricks ODBC ドライバー 2.6.17
- Databricks Runtime 7.5 シリーズのサポート終了
- ドライバー ノードとワーカー ノードに異なるプールを使用して、パフォーマンスの最適化とコストの制御を実現
- モデル レジストリに対するレジストリ全体のアクセス許可
- SCIM API を使用してユーザーを削除した場合にユーザーのホーム ディレクトリが保護されなくなる
- Databricks Runtime 8.3 と 8.3 ML は GA、8.3 Photon はパブリック プレビュー
- Python および SQL テーブルのアクセス制御 (GA)
- ジョブの UI と API にジョブ実行の所有者を表示
- 機密の Spark 構成プロパティと環境変数をシークレットを使用して保護する (パブリック プレビュー)
- Git の Repos が一部のリージョンの新規および既存のワークスペースで既定で有効化
- 再設計されたワークスペース設定 UI
ListTokens
およびListAllTokens
データベース クエリの期限切れトークンの更新- 管理者のアクセス許可を付与または取り消すときに確認が必要になる
- Web UI のキーボード ショートカットに対する変更
- 2021 年 5 月
- Databricks Mosaic AI: 全 ML ライフサイクル向けのデータ ネイティブおよび共同作業ソリューション
- SQL Analytics の名前が Databricks SQL に変更
- Delta Live Tables を使用した ETL パイプラインの作成と管理 (パブリック プレビュー)
- Azure スポット VM の一般提供を開始
- 独自のキーを使用して Databricks SQL クエリとクエリの履歴を暗号化する (パブリック プレビュー)
- 終了する汎用クラスター数の上限の引き上げ
- ピン留めされるクラスター数の上限の引き上げ
- ノートブックの結果の格納場所を管理する (パブリック プレビュー)
- コントロール プレーンのノートブックとシークレット データを独自のキーで暗号化する (パブリック プレビュー)
- Databricks Runtime 7.4 シリーズのサポート終了
- Repos ユーザーは個人用アクセス トークンを使用して Azure DevOps と統合できるようになりました
- 2021 年 4 月
- Databricks Runtime 8.2 (GA)
- 強化されたジョブのユーザー インターフェイスによるジョブ管理の容易化
- 再起動および編集時にクラスター ポリシーの変更が既存のクラスターに自動的に適用される
- タスクの試行が失敗したときにジョブ タスクの再試行を追跡する
- 新しいクラスターを作成するときにクラスターの詳細をすばやく表示する
- MLflow サイドバーに最新の実験が反映される
- MLflow 内の
conda.yaml
ファイルの既定チャネルへの変更 - Microsoft Entra ID を使った Tableau Online から Azure Databricks への認証の合理化
- Databricks Runtime 8.2 (ベータ版)
- 新しい拡張インフラストラクチャでは、カスタム ルートとエグレス ファイアウォールの更新が必要
- ユーザーとグループの制限
- ジョブの実行状態を簡単に監視
- グローバル初期化スクリプトがクラスターを処理するモデルで実行されなくなりました
- モデル レジストリのアクティビティに関する電子メール通知を受け取る
- Databricks Runtime 6.4 シリーズのサポート終了
- 2021 年 3 月
- Azure Databricks でノートブックの表示のダーク モードをサポート
- Azure スポット VM により Azure Databricks の TCO を削減 (パブリック プレビュー)
- Databricks Runtime 8.1 (GA)
- 強化されたジョブのユーザー インターフェイスによるジョブの作成と管理の容易化 (パブリック プレビュー)
- ジョブ実行の試行ごとに返される新しい連続値を使用してジョブの再試行を追跡
- Premium ワークスペースに保存されるジョブ数の上限の引き上げ
- お気に入りの BI ツールや SQL クライアントから Azure Databricks に接続するためのより簡単な方法
- Azure Databricks Repos により、Git リポジトリを使用して、Databricks と CI/CD システムを統合することができます
- 失敗したジョブ クラスターの自動再試行が元に戻される
- Microsoft Entra ID を使った Tableau Desktop から Azure Databricks への認証の合理化
- Databricks Runtime 8.1 (Beta)
- モデル提供で追加のモデルの種類をサポート
- モデル レジストリを検索するための新しいオプション
- 終了する汎用クラスター数の上限の引き上げ
- ワークスペースにピン留めされるクラスター数の上限の引き上げ
- Databricks Runtime 8.0 (GA)
- 2021 年 2 月
- 新しい Azure Databricks Power BI コネクタ (GA)
- Azure Databricks でのユーザー アクティビティの診断ログの一般提供開始
- DBFS REST API の get-status および list の応答に modification_time を追加
- MLflow で長い実験名を簡単にコピー
- 提供クラスターのメモリ サイズとコア数を調整
- Web ターミナルの一般提供開始
- Azure SQL Database および SQL Server 用 Apache Spark コネクタで Databricks Runtime 7.x 以降をサポート
- Databricks Runtime 7.2 シリーズのサポート終了
- Databricks Runtime 7.6 GA
- Databricks Runtime 8.0 (ベータ版)
- Databricks Runtime for Genomics は非推奨になりました
- MLflow の実行成果物表示の JSON をさらに読みやすく表示
- REST API を使用してモデル レジストリにコメントを入力する
- API 呼び出しで既定のクラスター値を簡単に指定する
- 現在のワーカー割り当てに従ってクラスター ワーカーの構成を調整する
- タスク パラメーター変数を使用してジョブのタスクにコンテキスト固有の情報を渡す
- ジョブの失敗によるエラー メッセージに機密の可能性がある情報が含まれなくなりました
- 2021 年 1 月
- セキュリティで保護されたクラスター接続 (パブリック IP なし) は一般提供
- Databricks Runtime 7.1 シリーズのサポート終了
- インスタンス プールに事前に読み込まれた Docker イメージを使用してクラスターの起動時間を短縮する
- ノートブックでの検索と置換ですべての一致の変更がサポートされるようになりました
- 単一ノード クラスター (GA)
- 自由形式のクラスター ポリシーの種類の名前が "Unrestricted" (無制限) に変更されました
- ユーザーが 1 つのポリシーにしかアクセスできない場合、クラスター ポリシー フィールドが表示されない
- Databricks Runtime 7.0 シリーズのサポート終了
- 2020 年 12 月
- Databricks Runtime 7.5 GA
- Jobs API で既存のジョブの更新がサポートされるようになりました
- 新しいグローバル初期化スクリプト フレームワークが GA になりました
- Databricks Runtime 7.5 (ベータ版)
- Jobs API の end_time フィールドでエポック時間が使用されるようになりました
- 新しいビジュアル ブラウザーを使用して DBFS ファイルを検索する
- ジョブ、クラスター、ノートブック、およびその他のワークスペース オブジェクトの可視性の制御は、新しいワークスペースでは既定で有効になります
- MLflow での入れ子になった実行の表示が改善されました
- 管理者がユーザー アカウントをロックできるようになりました (パブリック プレビュー)
- NVIDIA ドライバーの更新
- 2020 年 11 月
- Databricks Runtime 6.6 シリーズのサポート終了
- MLflow モデル レジストリの GA
- 登録されたモデルが関連付けられているかどうかに基づいて実験の実行をフィルター処理する
- [データ] タブから使用できるようになったパートナー統合ギャラリー
- クラスター ポリシーで allowlist と blocklist をポリシーの種類名として使用するようになりました
- ジョブ クラスターの作成が失敗した場合の自動再試行
- 目次を使用してノートブック内を移動する
- Databricks SQL (パブリック プレビュー)
- 単一ノード クラスターで Databricks Container Services がサポートされるようになりました
- Databricks Runtime 7.4 GA
- Databricks JDBC ドライバーの更新
- Databricks Connect 7.3 (ベータ版)
- 2020 年 10 月
- オンライン Power BI サービスで新しい Azure Databricks Power BI コネクタが利用可能 (パブリック プレビュー)
- Databricks Runtime 7.4 (ベータ版)
- DBFS ルート用にカスタマー マネージド キーを使用します (GA)
- 実験アクセスの制御 (ACL) を拡張しました
- Jupyter ノートブック (ipynb) ファイルの高忠実度のインポートとエクスポート
- SCIM API の向上: ユーザー レコード応答で間接および直接のグループ両方が返される
- Azure 要求 ID が例外に含まれるようになりました
- Databricks Runtime 6.5 シリーズのサポート終了
- セキュリティで保護されたクラスター接続 (パブリック IP なし) はパブリック プレビュー
- SCIM API の向上:
$ref
フィールドの応答 - 診断 (監査) ログが低待機時間で配信されるようになりました
- Databricks Runtime 7.3、7.3 ML、および 7.3 Genomics で、長期サポート (LTS) が宣言されました
- matplotlib を使用してより高い解像度で画像をレンダリングします
- Databricks CLI または Databricks API を使用して Azure Key Vault サポートされているシークレット スコープを作成します
- Microsoft Entra ID トークンを使って Databricks CLI に対して認証する
- 新しい Azure リージョン (パブリック プレビュー)
- 2020 年 9 月
- Databricks Runtime 7.3、7.3 ML、7.3 Genomics が GA になりました
- 単一ノードクラスター (パブリック プレビュー)
- DBFS REST API のレート制限
- 新しいサイドバー アイコン
- 実行中のジョブの上限の引き上げ
- MLflow での成果物アクセス制御リスト (ACL)
- MLflow の操作性の向上
- 新しい Azure Databricks Power BI コネクタ (パブリック プレビュー)
- DBFS ルートに対してカスタマー マネージド キーを使用する (パブリック プレビュー)
- 新しい JDBC と ODBC ドライバーにより BI の高速化と低遅延化が実現
- MLflow モデルの提供 (パブリック プレビュー)
- クラスターの UI の改善
- ジョブ、クラスター、ノートブック、およびその他のワークスペース オブジェクトの可視性の制御
- 既定では、トークンを作成する機能は使用できなくなりました
- MLflow モデル レジストリで、ワークスペース間でのモデルの共有をサポートします
- Databricks Runtime 7.3 (ベータ版)
- Azure Databricks でのワークロードの種類に対する名前の変更
- 2020 年 8 月
- トークン管理 API が GA になり、管理者は管理コンソールを使用してトークンへのユーザー アクセスを許可および取り消すことができます
- Shiny アプリのメッセージ サイズの制限の引き上げ
- ローカル モードでクラスターをセットアップするための手順が改善されました
- 実行に関連付けられているノートブックのバージョンを表示する
- Databricks Runtime 7.2 GA
- Databricks Runtime 7.2 ML GA
- Databricks Runtime 7.2 Genomics GA
- アクセス許可 API (パブリック プレビュー)
- Databricks Connect 7.1 (GA)
- クラスター ライブラリの反復可能なインストール順序
- MLflow 登録済みモデルのページからモデルを作成する (パブリック プレビュー)
- Databricks コンテナー サービスで GPU イメージをサポート
- 2020 年 7 月
- Web ターミナル (パブリック プレビュー)
- セキュリティが強化された新しいグローバル init スクリプト フレームワーク (パブリック プレビュー)
- IP アクセス リストの一般提供が開始されました
- 新しいファイル アップロード ダイアログ
- SCIM API のフィルターと並べ替えの機能強化
- Azure Government リージョンの追加
- Databricks Runtime 7.1 GA
- Databricks Runtime 7.1 ML GA
- Databricks Runtime 7.1 Genomics GA
- Databricks Connect 7.1 (パブリック プレビュー)
- IP アクセス リスト API の更新
- Python ノートブックで、セルごとに複数の出力がサポートされるようになりました
- ノートブックのコードと結果のセルを並べて表示
- ジョブ スケジュールの一時停止
- Jobs API エンドポイントによる実行 ID の検証
- Databricks REST API GA に対して認証する Microsoft Entra ID トークン
- ノートブック内の SQL の自動書式設定
- Maven と CRAN ライブラリのインストールの再現可能な順序
- Token Management API (パブリック プレビュー) を使用してユーザーの個人用アクセス トークンを制御する
- 切り取られたノートブック セルの復元
- 管理者以外のユーザーに対してジョブを "管理できる" 権限を割り当てる
- 管理者以外の Azure Databricks ユーザーは、SCIM API を使用してユーザー名で表示およびフィルター処理できます
- ジョブ実行の詳細を表示するときにクラスターの仕様を表示するリンク
- 2020 年 6 月
- Databricks Connect で Databricks Runtime 6.6 のサポートを開始
- Databricks Runtime 7.0 ML GA
- Apache Spark 3.0 で稼働する Databricks Runtime 7.0 GA
- Databricks Runtime 7.0 for Genomics GA
- MLflow モデルのステージ依存アクセス制御
- Notebook で自動スクロールの無効化がサポートされるようになりました
- メタストア IP アドレスが 2020 年 6 月 30 日に変更
- Internet Explorer 11 のサポートは 8 月 15 日に終了
- Databricks Runtime 6.2 シリーズのサポート終了
- クラスター ポリシーを使用してクラスターの作成を簡素化および制御する (パブリック プレビュー)
- SCIM Me エンドポイントが SCIM 準拠の応答を返すようになりました
- IP アクセス リストを使用して Azure Databricks へのアクセスを制限する (パブリック プレビュー)
- 2020 年 5 月
- Easv4 シリーズの VM (ベータ版)
- Databricks Runtime 6.6 for Genomics GA
- Databricks Runtime 6.6 ML GA
- Databricks Runtime 6.6 GA
- DBFS REST API 削除エンドポイントのサイズの制限
- 大量の MLflow 登録済みモデルを簡単に表示
- すべてのクラスターにインストールするように構成されたライブラリが Databricks Runtime 7.0 以降を実行しているクラスターにインストールされない
- Databricks Runtime 7.0 for Genomics (ベータ版)
- Databricks Runtime 7.0 ML (ベータ版)
- Databricks Runtime 6.6 for Genomics (ベータ版)
- Databricks Runtime 6.6 ML (ベータ版)
- Databricks Runtime 6.6 (ベータ版)
- ジョブ クラスターがジョブ名および ID でタグ付けされる
- 削除されたノートブックのセルを復元する
- ジョブ保留キューの制限
- 2020 年 4 月
- 各 Azure Databricks ワークスペースの一意の URL
- MLflow 追跡 UI の機能強化
- ノートブックの使いやすさの向上
- トークンを使って Databricks REST API に対して認可する (パブリック プレビュー)
- 単一ユーザーがパススルー クラスターの Apache Spark ログを表示できる
- Databricks Connect で Databricks Runtime 6.5 のサポートを開始
- Databricks Runtime 6.1 および 6.1 ML のサポート終了
- Databricks Runtime 6.5 GA
- Databricks Runtime 6.5 for Machine Learning GA
- Databricks Runtime 6.5 for Genomics GA
- Databricks Runtime 6.0 および 6.0 ML のサポート終了
- 2020 年 3 月
- マネージド MLflow モデル レジストリ コラボレーション ハブを利用可能 (パブリック プレビュー)
- コスト管理レポート改良のためにワークスペース、プール、クラスターのタグが DBU の使用状況の詳細と Azure VM に反映される
- Databricks Runtime 7.0 (ベータ版) プレビュー Apache Spark 3.0
- Databricks Runtime 6.5 ML (ベータ版)
- Databricks Runtime 6.5 (ベータ版)
- Azure Databricks のフィードバックが Azure Databricks フィードバック ポータルに直接送信されるようになりました
- RStudio Server 内での Shiny アプリケーションの開発とテスト
- ノートブックの既定の言語を変更します
- Databricks Connect で Databricks Runtime 6.4 のサポートを開始
- Databricks Connect で Databricks Runtime 6.3 のサポートを開始
- 2020 年 2 月
- 2020 年 1 月
- 近日対応予定: コスト管理レポート改良のためにワークスペース、プール、クラスターのタグが DBU の使用状況の詳細と Azure VM に反映されます
- Azure Databricks と Azure Lighthouse を同じサブスクリプションで共存させることができるようになりました
- Databricks Runtime 6.3 for Genomics GA
- Databricks Runtime 6.3 ML GA
- Databricks Runtime 6.3 GA
- 既定で有効になっているディスク キャッシュ
- クラスターの標準自動スケール手順を構成できるようになりました
- SCIM API は、Get Users と Get Groups のページ編集をサポートしています (パブリック プレビュー)
- ファイル ブラウザーのスイムレーンの幅が240 px に増加しました
- Databricks Runtime 3.5 LTS のサポート終了
- 2019 年 12 月
- Databricks Connect で Databricks Runtime 6.2 のサポートを開始
- Databricks Container Services (GA) を使用して独自のコンテナー イメージでクラスターを構成する
- Databricks Runtime 6.2 for Genomics GA
- Azure Databricks SCIM プロビジョニング コネクタがアプリ ギャラリーで利用可能
- Databricks Runtime 5.3 および 5.4 のサポート終了
- Databricks Runtime 6.2 ML GA
- Databricks Runtime 6.2 GA
- Databricks Connect で Databricks Runtime 6.1 のサポートを開始
- 2019 年 11 月
- 2019 年 10 月
- Azure Event Hubs に移動されたサポート可能性メトリック
- 標準クラスターおよび Scala での Azure Data Lake Storage 資格情報のパススルーが GA に
- Databricks Runtime 6.1 for Genomics GA
- Databricks Runtime 6.1 for Machine Learning GA
- MLflow API の呼び出しが速度制限の対象に
- 高速クラスター起動のためのインスタンス プールの一般提供開始
- Databricks Runtime 6.1 GA
- Databricks Runtime 6.0 for Genomics GA
- Azure Databricks ワークスペースを独自の仮想ネットワークにデプロイする機能 (VNet インジェクションとも呼ばれる) が GA
- 管理者以外の Azure Databricks ユーザーが SCIM API を使用してユーザーとグループの名前と ID を読み取り可能
- ワークスペース API がノートブックとフォルダーのオブジェクト ID を返す
- Databricks Runtime 6.0 ML GA
- 新しいリージョン: ブラジル南部およびフランス中部
- Databricks Runtime 6.0 GA
- 2019 年 9 月
- Databricks Runtime 5.2 のサポート終了
- Databricks Light を使用するプールによってサポートされる自動クラスターを起動する (パブリック プレビュー)
- 2019 年 10 月 14 日に Azure SQL Database ゲートウェイの IP アドレスが変更されます
- 標準クラスターおよび Scala で Azure Data Lake Storage 資格情報のパススルーのサポートを開始 (パブリック プレビュー)
- pandas DataFrames が拡大縮小なしでノートブックにレンダリング可能に
- Python バージョン セレクターが動的に表示されるようになりました
- Databricks Runtime 6.0 ベータ版
- 2019 年 8 月
- 2019 年 7 月
- 近日公開予定: Databricks 6.0 は Python 2 をサポートしません
- プールのアイドル状態のインスタンスに Databricks Runtime のバージョンをプリロードする
- カスタム クラスター タグとプール タグが一緒に再生される
- MLflow 1.1 でのいくつかの UI と API の機能強化
- pandas DataFrame 表示は Jupyter と同じようにレンダリングされる
- 新しいリージョン
- メタストアの接続制限を更新
- プールに対するアクセス許可の設定 (パブリック プレビュー)
- Databricks Runtime 5.5 for Machine Learning
- Databricks Runtime 5.5
- クイック クラスター起動用にインスタンスのプールをスタンバイに保持する (パブリック プレビュー)
- Ganglia メトリック
- グローバル系列の色
- 2019 年 6 月
- 2019 年 5 月
- 2019 年 4 月
- 2019 年 3 月
- 2019 年 2 月
- 2019 年 1 月
- 2018 年 12 月
- 2018 年 11 月
- 2018 年 10 月
- 2018 年 9 月
- 2018 年 8 月
- 2018 年 7 月
- 2018 年 6 月
- 2018 年 5 月
- 一般データ保護規制 (GDPR)
- Azure Databricks ユーザーは Microsoft Entra ID テナントに属している必要がある
- HorovodEstimator
- MLeap ML Model Export
- GPU クラスターの種類の増加
- ノートブック セル: 非表示と表示
- ドキュメント サイト検索
- Databricks Runtime 4.1 ML for Machine Learning (ベータ版)
- Databricks Delta
- 画像データ型のための display() のサポート
- GPU クラスターの種類
- シークレット管理の GA
- シークレット API エンドポイントと CLI コマンドの変更
- クラスターの固定
- クラスター自動開始
- ワークスペースの削除
- Databricks CLI 0.7.1
- 2018 年 4 月
- 2018 年 3 月
- 2018 年 2 月
- 時系列データをサポートする新しい折れ線グラフ
- 視覚化の機能強化
- ジョブ API を使用したジョブ実行の削除
- KaTeX math レンダリング ライブラリの更新
- Databricks CLI: 0.5.0 リリース
- DBUtils API ライブラリ
- ジョブのみをフィルター処理する
- ジョブ作成ページからの spark-submit
- クラスター作成ページから Python 3 を選択
- ワークスペース UI の機能強化
- SQL コマンドとデータベース名のオートコンプリート
- サーバーレス プールで R のサポートを開始
- XGBoost が Spark パッケージとして利用可能に
- SQL および Python でのテーブル アクセス制御 (ベータ)
- 2018 年 1 月