Snowflake データのデータ品質

Snowflake データ ソースをスキャンする場合、Microsoft Purview では次の処理がサポートされます。

以下を含む技術的なメタデータの抽出:

• サーバー、データベース、スキーマ、および列を含むテーブル、列を含むビュー、外部キー、および一意の制約
• パラメーター データセットと結果セットを含むストアド プロシージャ
• パラメーター データセットを含む関数
• 列を含むパイプ、ステージ、ストリーム
• タスクとシーケンス

Microsoft Purview で Snowflake データをカタログするようにデータ マップ スキャンを構成する

Snowflake ソースを登録する

統合カタログで新しい Snowflake ソースを登録するには、次の手順に従います。

• Microsoft Purview ガバナンス ポータルで Microsoft Purview アカウントに移動します。
• 左側のナビゲーションで [データ マップ] を選択します。
• [登録] を選択します
• [ソースの登録] で、[Snowflake] を選択します。

データ マップ スキャンを設定する

• 登録されている Snowflake ソースを選択します。
• [+ 新しいスキャン] を選択します。
• 以下の詳細を指定します。
  • 名前: スキャンの名前
  • 統合ランタイム経由で接続する: シナリオに応じて、Azure 自動解決統合ランタイム、マネージド VNet IR、または SHIR を選択します。
  • 接続のホスト: スキャン中に Snowflake への接続を確立するために使用するエンドポイントを選択します。 サーバー URL、またはデータ ソースで構成した他のホストから選択できます。
  • 資格情報: データ ソースに接続する資格情報を選択します。 次のことを確認してください。
    • 資格情報の作成時に [基本認証] を選択します。
    • [ユーザー名] 入力フィールドに、Snowflake への接続に使用するユーザー名を指定します。
    • Snowflake への接続に使用するユーザー パスワードを秘密キーに格納します。
  • Warehouse: 大文字と小文字を区別してスキャンを強化するために使用するウェアハウス インスタンスの名前を指定します。 資格情報で指定されたユーザーに割り当てられた既定のロールには、このウェアハウスに対する USAGE 権限が必要です。
  • データベース: 大文字と小文字を区別してインポートする 1 つ以上のデータベース インスタンス名を指定します。 リスト内の名前をセミコロン (;)で区切ります。 たとえば、DB1 です。DB2。 資格情報で指定されたユーザーに割り当てられた既定のロールには、データベース オブジェクトに対する適切な権限が必要です。
  • スキーマ: インポートするスキーマのサブセットをセミコロン区切りリストとして一覧表示します。
• [接続のテスト] を選択して設定を検証します (Azure Integration Runtimeを使用する場合に使用できます)。
• [続行] を選択します。
• 分類用のスキャン ルール セットを選択します。 システムの既定値、既存のカスタム ルール セット、または新しいルール セットをインラインで作成することができます。
• スキャンを確認し、[ 保存して実行] を選択します。

スキャンすると、Snowflake のデータ資産が統合カタログ検索で使用できるようになります。 Microsoft Purview で Snowflake に接続して管理する方法の詳細については、 こちらのドキュメントを参照してください。

重要

オブジェクトがデータ ソースから削除された場合、現在、後続のスキャンでは、Microsoft Purview の対応する資産は自動的に削除されません。

データ品質スキャン用に Snowflake データ ソースへの接続を設定する

この時点で、スキャンされた資産をカタログ化およびガバナンスの準備ができました。 スキャンした資産をガバナンス ドメイン Sele の Data Product に関連付けます。 [データ品質] タブで、新しいAzure SQLデータベース接続を追加します。手動で入力したデータベース名を取得します。

1. [データ品質] > [ガバナンス ドメイン] > [管理] タブを選択して接続を作成します。

   

2. [接続] ページで接続を構成します。

   • 接続名と説明を追加する
   • ソースの種類 Snowflake を選択する
   • サーバー名、ウェアハウス名、データベース名、スキーマ名、テーブル名を追加する
   • 認証方法の選択 - 基本認証
   • ユーザー名の追加
   • 資格情報の追加
     • Azure サブスクリプションを追加する
     • キー コンテナー接続
     • シークレット名
     • シークレットのバージョン

3. 接続をテストして、構成された接続が正常に確立されていることを確認します。

   

   

重要

• データ品質スチュワードは、データ品質接続を設定するために Snowflake への 読み取り専用アクセス権 を必要とします。
• vNet はまだ Snowflake データ ソースではサポートされていません。
• Snowflake コネクタは 、https:// を受け入れません。 データ ソース接続を構成するためにサーバー名を追加するときに、 https:// を削除します。

Snowflake でのデータのプロファイリングとデータ品質スキャン

接続のセットアップが正常に完了したら、プロファイルを作成してルールを適用し、Snowflake でデータの DQ スキャンを実行できます。 以下のドキュメントで説明されているステップバイステップのガイドラインに従ってください。

• データのデータ プロファイルを構成して実行する方法
• データ品質スキャンを構成して実行する方法

参照ドキュメント

• データ マップのスキャン - Snowflake データ
• データ品質のトラブルシューティング
• データ品質接続を設定する方法について説明します