Azure Data Catalog とは何ですか

[アーティクル]
12/13/2023

重要

Azure Data Catalog は、2024 年 5 月 15 日に廃止されました。

データカタログの機能については、データ資産全体に対する一元化されたデータガバナンスを提供する、Microsoft Purview サービスをご使用ください。

Azure Data Catalog は、フルマネージドクラウドサービスです。これによりユーザーは、必要なデータソースを検出し、検出したデータソースを理解することができます。同時に、Data Catalog は、組織が既存の投資からより多くの価値を引き出すことを支援します。

Data Catalog を使用すると、すべてのユーザー (アナリスト、データサイエンティスト、または開発者) が、そのデータ環境のデータソースを検出し、理解して利用することができます。 Data Catalog には、メタデータと注釈のクラウドソーシングモデルが含まれるため、誰もが、データの検出と使用を可能にするために貢献できます。これは、組織のすべてのユーザーにとって、自分の知識を共有し、データのコミュニティとカルチャを構築するための単一の中心的な場所です。

データの利用者にとっての検出の難しさ

従来、エンタープライズデータソースの検出は、仲間の知識に基づいた組織的プロセスでした。この方法により、自社の情報資産から最大の価値を引き出すことを望んでいる企業は、多くの課題に直面します。

別のプロセスの一部としてたまたま発見するまで、データソースが存在することに気付かないことがあります。データソースを登録する中心的な場所はありません。
ユーザーは、データソースの場所を知らない限り、クライアントアプリケーションを使用してデータに接続することができません。データを利用するには、接続文字列またはパスを知っている必要があります。
データソースのドキュメントの場所を知らない限り、データの使用目的を理解することはできません。データソースとドキュメントはさまざまな場所に存在し、さまざまな方法で使用される可能性があります。
情報資産について疑問がある場合、データを担当している専門家またはチームを見つけて、オフラインで接触する必要があります。データとその使用に関する分析観点を持っているエキスパートとの間に明確なつながりはありません。
データソースへのアクセスを要求するプロセスを理解しない限り、データソースとそのドキュメントを検出できても、必要なデータにアクセスすることはできません。

データの作成者にとっての検出の難しさ

データの利用者が直面する課題は前述のとおりですが、情報資産の作成と保守を担当するユーザーも固有の課題を抱えています。

記述メタデータを使用してデータソースに注釈を付けることは、多くの場合、報われない努力になります。通常、クライアントアプリケーションは、データソースに格納されている説明を無視します。
データソースのドキュメントの作成は、多くの場合、報われない努力になります。ドキュメントをデータソースと同期させることは、継続的な責務です。古いと見なされたドキュメントは、ユーザーの信頼を失う可能性があります。
データソースのドキュメントの作成と管理は、複雑で時間がかかる仕事です。データソースを使用するすべてのユーザーがドキュメントを利用できるように準備することは、この仕事をさらに困難にする可能性があります。
データソースへのアクセスを制限し、データの利用者がアクセス権の要求方法を確実に理解するようにすることは、いまだに解決されていない課題です。

複雑に絡み合うこれらの課題は、エンタープライズデータの利用と理解を推奨し促進することを望んでいる企業にとって、大きな障壁となっています。

Azure Data Catalog が解決するもの

Data Catalog はこれまでに述べた問題の解決を目指して設計されており、企業は、Data Catalog によって、既存の情報資産から最大の価値を引き出すことができます。 Data Catalog は、データを管理しているユーザーが、データソースを容易に検出し、把握できるようにします。

Data Catalog は、データソースを登録できるクラウドベースのサービスを提供しています。データは元の場所に残りますが、メタデータのコピーと、データソースの場所に対する参照が Data Catalog に追加されます。このメタデータのインデックスも作成されるので、検索で簡単に各データソースを見つけられるようになり、データソースを検出するユーザーが理解しやすくなります。

データソースを登録すると、そのメタデータを強化できるようになります。メタデータは、それを登録したユーザーまたは社内の他のユーザーが追加することができます。すべてのユーザーが、記述、タグ、その他のメタデータ (ドキュメントやデータソースへのアクセス要求のプロセスなど) を指定してデータソースに注釈を設定できます。この記述メタデータによって、データソースから登録される構造メタデータ (列名やデータ型など) が補足されます。

データソースとその用途の検出することは、ソースの登録の主な目的です。企業ユーザーは、ビジネスインテリジェンス、アプリケーション開発、データサイエンス、または適切なデータが必要な他のタスクを行うためにデータを必要とすることがあります。これらのユーザーは、Data Catalog の検出機能を使用して、各自のニーズを満たすデータをすぐに見つけ出し、データを理解してそれが目的に適合するかどうかを評価し、各自が選択したツールでデータソースを開いてデータを利用することができます。

同時に、ユーザーは、登録されているデータソースに対してタグ付けやドキュメント作成、注釈付けを行うことで、カタログを充実させることができます。ユーザーは、新しいデータソースを登録することもできます。このデータソースを、カタログユーザーのコミュニティで検出し、理解し、利用することができます。

Data Catalog の機能

Data Catalog についてさらに理解を深める

Data Catalog の機能の詳細については、以下のページを参照してください。

次のステップ

Azure Data Catalog を開く

次の方法で共有