タグを使用した使用状況の監視
コストを監視し、Azure Databricks の使用量を組織の事業単位およびチームに正確に関連付ける (たとえば、チャージバックのため) には、ワークスペース (リソース グループ) とコンピューティング リソースにタグを付けることができます。 これらのタグは、Azure portal でアクセスできる、詳細な コスト分析レポート に反映されます。
以下は、1か月分の clusterid タグごとのコストを詳細に表示している、Azure portal の詳細な請求書のコスト分析レポートです。
タグ付けされたオブジェクトとリソース
| オブジェクト | タグ付けインターフェイス (UI) | タグ付けインターフェイス (API) |
|---|---|---|
| ワークスペース | Azure Portal | Azure リソース API |
| プール | Azure Databricks ワークスペースのプール UI | インスタンス プール API |
| 汎用とジョブのコンピューティング | Azure Databricks ワークスペースのコンピューティング UI | クラスター API |
| SQL ウェアハウス | Azure Databricks ワークスペースの SQL ウェアハウス UI | Warehouses API |
警告
キー Name を持つカスタム タグをクラスターに割り当てないでください。 すべてのクラスターにはタグ Name があり、この値は Azure Databricks によって設定されます。 キー Name に関連付けられている値を変更すると、Azure Databricks でそのクラスターを追跡できなくなります。 その結果、アイドル状態になってもクラスターが終了されない可能性があり、使用コストが引き続き発生することになります。
既定のタグ
Azure Databricks により、次の既定のタグが汎用コンピューティングに追加されます。
| タグ キー | Value |
|---|---|
Vendor |
定数値: Databricks |
ClusterId |
クラスターの Azure Databricks 内部 ID |
ClusterName |
クラスターの名前 |
Creator |
クラスターを作成したユーザーのユーザー名 (メール アドレス) |
ジョブ クラスターの場合、Azure Databricks では次の既定のタグも適用されます。
| タグ キー | Value |
|---|---|
RunName |
ジョブ名 |
JobId |
ジョブ ID |
Azure Databricks により、すべてのプールに次の既定のタグが追加されます。
| タグ キー | Value |
|---|---|
Vendor |
定数値: Databricks |
DatabricksInstancePoolCreatorId |
プールを作成したユーザーの Azure Databricks 内部 ID |
DatabricksInstancePoolId |
プールの Azure Databricks 内部 ID |
Lakehouse Monitoring によって使われるコンピューティングには、Azure Databricks によって次のタグも適用されます。
| タグ キー | Value |
|---|---|
LakehouseMonitoring |
true |
LakehouseMonitoringTableId |
監視対象テーブルの ID |
LakehouseMonitoringWorkspaceId |
モニターが作成されたワークスペースの ID |
LakehouseMonitoringMetastoreId |
監視対象テーブルが存在するメタストアの ID |
タグの伝達
ワークスペース、プール、クラスターのタグは Azure Databricks で集計され、コスト分析レポートのために Azure VM に伝達されます。 ただし、プールとクラスターのタグは相互に異なる方法で伝達されます。
ワークスペース タグとプール タグは集計され、プールをホストする Azure VM のリソース タグとして割り当てられます。
ワークスペース タグとクラスター タグは集計され、クラスターをホストする Azure VM のリソース タグとして割り当てられます。
クラスターがプールから作成される場合、ワークスペース タグとプール タグのみが VM に伝達されます。 プール クラスターの起動パフォーマンスを維持するために、クラスター タグは伝達されません。
タグ競合の解決
カスタムのクラスター タグ、プール タグ、またはワークスペース タグに Azure Databricks の既定のクラスターまたはプール タグと同じ名前が付いている場合、伝達されるときに、カスタム タグの方に x_ がプレフィックスとして付加されます。
たとえば、ワークスペースにタグ vendor = Azure Databricks が付けられている場合、このタグは既定のクラスター タグ vendor = Databricks と競合します。 そのため、タグは x_vendor = Azure Databricks と vendor = Databricks として伝達されます。
制限事項
- カスタム ワークスペース タグが変更された後に Azure Databricks に反映されるまで、最大 1 時間かかることがあります。
- Azure リソースに割り当てることができるタグは 50 個までです。 集計されたタグの総数がこの制限個数を超えると、
x_がプレフィックスとして付加されたタグはアルファベット順に評価され、制限個数を超えるタグは無視されます。 すべてのx_プレフィックス付きのタグを無視しても、タグの個数が制限を超えている場合、残りのタグがアルファベット順に評価され、制限個数を超えるタグは無視されます。 - タグ キーと値には、文字、スペース、数字、または文字
+、 ,-,=, ,@._:/のみを含めることができます。 他の文字を含むタグが無効です。 - タグ キー名または値を変更した場合、これらの変更は、クラスターの再起動またはプールの展開の後にのみ適用されます。
- クラスターのカスタム タグがプールのカスタム タグと競合している場合は、クラスターを作成できません。
ポリシーを使用したタグの適用
コンピューティング ポリシーを使用してクラスターにタグを適用できます。 詳細については、「カスタム タグの適用」を参照してください。