Condividi tramite

Configurazione di esempio per la governance dei dati

  • Articolo

La governance dei dati di Microsoft Purview, con Microsoft Purview Unified Catalog e Microsoft Purview Data Map, offre visibilità completa, attendibilità dei dati e innovazione responsabile per aiutare le organizzazioni a ottenere un valore aziendale maggiore nell'era dell'IA. Usando un esempio di gestione dei dati di integrità, seguire la procedura descritta in questo articolo per comprendere come configurare Unified Catalog e usare le relative funzionalità per creare una pratica di governance dei dati valida per l'organizzazione.

Passaggio 1: Configurare i domini di governance in Unified Catalog

I domini di governance sono la chiave per stabilire la responsabilità per i dati e consentono di federatare la governance di tali dati in tutta l'azienda. Quando si creano domini di governance, a partire dal proprietario appropriato si garantisce di essere in grado di identificare e collaborare in modo efficace con gli esperti per tutti i dati nel data estate. I domini di governance possono essere di molti tipi diversi da allineare al tipo di limite dei dati per il team che governerà tali dati. Ad esempio: domini funzionali (finanza, risorse umane, vendite) o domini dati (prodotto, cliente, integrità).

Prerequisiti

Concedere le autorizzazioni e compilare il primo dominio di governance

  1. Aprire il portale di Microsoft Purview.

  2. Accedere al portale di Microsoft Purview usando le credenziali per un account amministratore a cui è assegnato il ruolo di gestione dei ruoli, ad esempio un amministratore di Purview. Passare a Ruoli e ambiti delle impostazioni > per visualizzare e gestire.

  3. Selezionare Gruppi di ruoli.

  4. Nella pagina Gruppi di ruoli per le soluzioni Microsoft Purview selezionare il gruppo di ruoli Governance dei dati .

  5. Nella pagina Modifica membro del gruppo di ruoli selezionare Scegli utenti o Scegli gruppi.

  6. Selezionare la casella di controllo per tutti gli utenti o i gruppi da aggiungere al gruppo di ruoli.

  7. Selezionare Seleziona.

  8. In Unified Catalog selezionare Gestione catalogo e quindi Domini di governance.

  9. Nella pagina Domini di governance è possibile configurare il resto del catalogo per consentire ad altri utenti di federatare la proprietà dei dati, consentire ai team di sviluppare le proprie conoscenze e stabilire il valore aziendale dei dati.

    1. Per iniziare, selezionare Nuovo dominio di governance.
      1. Puoi aggiornare il nome del tuo dominio di governance, ma per questo possiamo denominarlo "(Tutorial) Personal Health" e fornirgli una descrizione di "Dati sanitari personali si riferisce a qualsiasi informazione correlata alla salute fisica o mentale di un individuo che viene raccolta e usata all'interno del settore sanitario. Ciò può includere un'ampia gamma di tipi di dati, ad esempio cartelle cliniche, cronologie di trattamento, immagini diagnostiche e risultati dei test di laboratorio. È spesso protetto da varie leggi e normative per garantire la privacy e la riservatezza."
      2. Selezionare il tipo come "dominio dati".
      3. Lasciare vuoto l'elemento padre (se questo è il primo dominio di governance nel catalogo non avrà nulla da selezionare qui)
      4. Selezionare Crea.
      5. Creare ora altri due domini autonomamente. Questi saranno i punti chiave della federazione per la collaborazione e la governance nella propria organizzazione, quindi pensa a chi potrebbe essere il proprietario dei tuoi domini quando implementi Microsoft Purview Unified Catalog.
        1. È possibile seguire questi esempi:
        • Un dominio funzionale aziendale rappresenta gli asset e i termini altamente controllati usati da un'intera società.
        • Sales è un dominio funzionale che la maggior parte delle organizzazioni avrà che è un dominio figlio di Corporate.

  10. Selezionare il dominio di governance creato.

  11. Selezionare la scheda Ruoli del dominio di governance.

  12. Per impostazione predefinita, quando si crea il dominio di governance si viene aggiunti a tutti i ruoli nel dominio di governance. In qualità di proprietario del dominio di governance si aggiungono gli amministratori dei dati (esperti aziendali nel dominio) e i proprietari dei prodotti dati (che sanno quali asset di dati sono i migliori da usare per gli altri utenti).

  13. Tornare alla scheda Dettagli .

  14. Selezionare il pulsante Gestisci criteri per applicare criteri a livello di dominio. Questo criterio verrà applicato a tutti i prodotti dati nel dominio, consentendo l'applicazione automatica di un criterio garantisce che gli esperti di dati non siano esperti di criteri.

  15. Nella scheda Gestisci criteri di accesso selezionare la casella di controllo accanto a Consenti copie dei dati. Selezionando questa opzione di criterio verrà applicata automaticamente un'attestazione che richiede a tutti gli utenti che richiedono l'accesso ai prodotti dati di attestare di comprendere i criteri di copia dei dati per i dati.

  16. Selezionare Salva modifiche per verificare che i criteri siano impostati dal dominio di governance.

  17. Selezionare Pubblica nel dominio di governance. Il pulsante Pubblica pubblica tutti gli altri concetti all'interno del dominio.

Creare termini del glossario

L'aggiunta di termini glossari al dominio di governance consente ad altri utenti di comprendere meglio il modo in cui l'azienda usa e comprende i dati. I termini del glossario garantiscono anche che le informazioni dettagliate usino termini comuni e, in genere, le conoscenze nel dominio di governance.

  1. Nella pagina per il dominio di governance trovare la scheda Termini glossario e selezionare Visualizza tutto.

  2. Nella pagina Termini glossario selezionare Nuovo termine.

  3. Immettere i dettagli:

    1. Nome: 'Outbreak'
    2. Descrizione: Una malattia che ha colpito o ha il potenziale per colpire una grande parte della popolazione.
    3. È possibile lasciare vuoto il resto per il momento, ma ci sono campi da raccogliere: il termine proprietario responsabile della definizione del termine per la propria azienda, acronimi da condividere comuni noti anche come nomi del termine, infine è possibile fornire collegamenti alle risorse che avrebbero ancora più informazioni sul termine.

  4. Selezionare Crea.

  5. Selezionare il pulsante Gestisci criteri . Analogamente ai criteri a livello di dominio, è possibile creare criteri a livello di termine che verranno applicati ovunque il termine in uso.

  6. Selezionare la casella accanto a Approvazione manager necessaria. In questo modo viene applicata un'approvazione secondaria da parte del gestore elencato degli utenti in Microsoft Entra ID quando viene richiesto l'accesso ai prodotti dati.

  7. Selezionare Pubblica per il termine outbreak creato. I termini pubblicati saranno filtrabili in Unified Catalog e garantire che gli altri utenti che usano il termine per descrivere il prodotto dati possano visualizzare tale descrizione in Unified Catalog durante l'esplorazione del prodotto dati.

  8. Creare ora altri due termini. Questa volta, selezionare il termine "Outbreak" come termine padre per i termini creati. Provare a creare relazioni tra questi termini figlio nella scheda correlata su entrambi i termini per contribuire a creare la rete di come questi termini interagiscono per spiegare l'intero argomento.

    1. Pandemia: un'epidemia globale di una malattia che colpisce un gran numero di persone in più paesi o continenti.
    2. Epidemia: un'epidemia a livello di paese o regionale di una malattia che è altamente contagiosa e colpisce gran parte della popolazione.

  9. Provare a creare un paio di altri termini in qualsiasi altro dominio creato in precedenza. Se non si è certi di cosa aggiungere, provare il pulsante Get suggested terms (Ottieni termini suggeriti ) per fare in modo che GenAI ne proponga alcuni in base alla descrizione e al nome del dominio già fornito.

Aggiungere un OKR

Aggiungere ora un OKR (obiettivo e risultato chiave) per il dominio integrità personale per aiutare altri utenti a comprendere il valore aziendale dei dati. Verrà creata una connessione diretta tra i dati e il valore aziendale fornito.

  1. Selezionare la casella OKR nella pagina del dominio di governance.

  2. Selezionare Nuovo OKR.

  3. Immettere prima i dettagli dell'obiettivo:

    1. Obiettivo: Ridurre il rischio di pandemia abilitando l'adozione efficace del vaccino per i pazienti.
    2. Proprietario: immettere il nome
    3. Data di destinazione: '2024-12-31'

  4. Selezionare Crea.

  5. L'aggiunta di risultati chiave all'obiettivo garantisce che gli obiettivi siano misurabili e che vengano monitorati i progressi verso l'obiettivo. Selezionare + Aggiungi risultato chiave.

  6. Immettere i dettagli dei risultati della chiave:

    1. Risultato chiave: assicurarsi che l'80% delle fasce di età più anziane (>65 anni) che hanno maggiori probabilità di essere colpite dalla pandemia ricevano la vaccinazione completa entro la fine dell'anno civile 2024.
    2. Stato di avanzamento: in corso
    3. Importo avanzamento: 70
    4. Importo obiettivo: 80
    5. Importo massimo: 100

  7. Selezionare Crea.

  8. Scegliere Pubblica.

Creare elementi di dati critici

Infine, creare un elemento dati critico (CDE) in Integrità personale per garantire che le colonne di dati più importanti abbiano una definizione, una comprensione coerenti e che soddisfino sempre le aspettative aziendali per il formato e l'archiviazione dei dati.

  1. Nella pagina domini di governance con il dominio Integrità personale selezionato selezionare la casella Elementi di dati critici .
  2. Selezionare Nuovo elemento dati critico.
  3. Immettere i metadati cde di base:
    1. Nome: gruppi di età
    2. Descrizione: il raggruppamento comune di età delle persone usato per garantire i report analitici necessari segue un riferimento da cui altri possono dipendere e rimuovere le singole età per migliorare l'anonimato dei dati. La fascia di età è divisa in 8 gruppi; <2 anni, 2-4 anni, 5-11 anni, 12-17 anni, 18-24 anni, 25-49 anni, 50-64 anni, 65+ anni.
    3. Proprietario: immettere il proprio nome
    4. Tipo di dati previsto: testo
    5. Selezionare Crea.

La potenza reale dell'ambiente cde consiste nel fatto che esegue il mapping diretto alle colonne di dati fisiche in cui sono archiviati questi dati. Questa connessione garantisce una comprensione comune e consente la valutazione delle regole e dei criteri di Data Quality su larga scala.

  1. Nell'ambiente cde appena creato selezionare + Aggiungi colonna.

  2. Cercare l'asset di dati Covid 19 Vaccine and Case Trends dal contenitore gold del data lake

  3. Selezionare la casella, non il nome, dell'asset Covid 19 Vaccine and Case Trends .

    Consiglio

    Se si seleziona il nome blu dell'asset, verrà aperta una nuova finestra in Microsoft Purview che mostra i dettagli dell'asset.

  4. Selezionare il pulsante di opzione accanto alla colonna AgeGroupVacc.

  5. Selezionare Aggiungi.

  6. Selezionare la scheda Qualità dati nella parte superiore dell'ambiente cde appena creato per applicare le regole di qualità dei dati all'ambiente cde. È simile a come sono stati aggiunti criteri per i termini del glossario e i domini di governance.

  7. Selezionare Nuova regola

  8. Selezionare corrispondenza tipo di dati

  9. Immettere Il nome della regola: Conferma formattazione gruppo di età

  10. Selezionare Crea.

  11. Selezionare Pubblica nell'ambiente cde

Questa cde applicherà ora automaticamente una regola di qualità dei dati a ogni prodotto dati che usa l'asset Covid 19 Vaccine and Case Trends, che verrà illustrato nella sezione successiva.

  1. Provare a creare un paio di altri CDE negli altri domini. Ecco alcune idee:
    • Sales: Revenue and Seller Name
    • Aziendale: ID prodotto

Passaggio 2: Configurare e registrare i dati in Mappa dati

Se non sono disponibili origini dati per l'analisi, è possibile seguire questa procedura per distribuire completamente un esempio di Azure Data Lake Storage (ADLS Gen2).

Consiglio

Se si dispone già di un'origine dati nello stesso tenant dell'account Microsoft Purview, passare alla parte successiva di questa sezione per analizzare gli asset.

In un'area dati reale sono disponibili molti sistemi diversi in uso per applicazioni dati diverse. Esistono ambienti di creazione di report come Fabric e Snowflake in cui i team usano copie dei dati per creare soluzioni analitiche e alimentare i report e i dashboard. Esistono sistemi dati operativi che alimentano i team o i clienti delle applicazioni per completare i processi aziendali che raccolgono o aggiungono dati in base alle decisioni prese durante il processo.

Per creare un patrimonio dati più realistico, è consigliabile mostrare molte origini di dati nel catalogo, che possono coprire l'ampiezza di dati diversi che qualsiasi azienda potrebbe avere. I tipi di dati necessari per alimentare un caso d'uso possono essere molto diversi con gli utenti aziendali che necessitano di report e dashboard, gli analisti hanno bisogno di dimensioni e fatti conformi per compilare report, i data scientist o i data engineer hanno bisogno di dati di origine non elaborati provenienti direttamente dal sistema che raccoglie i dati tutti questi e più consentono ai diversi utenti di vedere l'importanza della ricerca, e l'accesso ai dati nella stessa posizione.

Per altre esercitazioni sull'aggiunta di dati al patrimonio, è possibile seguire queste guide:

Prerequisiti

  • Sottoscrizione in Azure: Creare oggi l'account gratuito di Azure
  • Microsoft Entra ID per il tenant: Microsoft Entra ID Governance
  • Un account Microsoft Purview
    • Amministrazione l'accesso all'account Microsoft Purview (impostazione predefinita se è stato creato l'account Microsoft Purview). Autorizzazioni nella nuova anteprima del portale di Microsoft Purview | Microsoft Learn)
  • Tutte le risorse; Microsoft Purview, l'origine dati e Microsoft Entra ID devono trovarsi nello stesso tenant cloud.

Configurare il patrimonio dati

R. Creare e popolare un account di archiviazione
  1. Seguire questa guida per creare un account di archiviazione: Creare un account di archiviazione per Azure Data Lake Storage Gen2
  2. Creare contenitori per il nuovo data lake:
    1. Passare alla pagina Panoramica dell'account di archiviazione.
    2. Selezionare la scheda Contenitori nella sezione Archiviazione dati.
    3. Selezionare il pulsante + Contenitore
    4. Assegnare il nome "bronze" e selezionare il pulsante Crea
    5. Ripetere questi passaggi per creare un contenitore "gold"
  3. Scaricare alcuni dati CSV di esempio da data.gov: covid-19 vaccinazione e tendenze dei casi per fascia di età, Stati Uniti
  4. Caricare il file CSV nel contenitore denominato 'bronze' nell'account di archiviazione creato.
  5. Selezionare il contenitore denominato 'bronze' e selezionare il pulsante Carica .
  6. Esplorare il percorso in cui è stato salvato il file CSV e selezionare il file Covid-19_Vaccination_Case _Trends .
  7. Scegliere Carica.
B. Creare un Azure Data Factory

Questo passaggio illustra il modo in cui i dati si spostano tra i livelli di un data lake di medallion e garantisce che i dati siano in un formato standardizzato che i consumer si aspetterebbero di usare. Si tratta di un passaggio prerequisito per l'esecuzione di Data Quality.

  1. Seguire questa guida per creare un Azure Data Factory: Creare un Azure Data Factory

  2. Copiare i dati dal file CSV nel contenitore 'bronze' nel contenitore 'gold' come tabella di formato Delta usando questa guida Azure Data Factory: Trasformare i dati usando un flusso di dati di mapping

  3. Aprire l'esperienza Azure Data Factory (ADF) dal portale di Azure selezionando il pulsante Avvia studio nella scheda Panoramica della risorsa ADF creata.

  4. Selezionare la scheda Autore in ADF Studio.

  5. Selezionare il + pulsante e scegliere Flusso di dati dal menu a discesa.

  6. Assegnare al flusso di dati il nome 'CSVtoDeltaC19VaxTrends'.

  7. Selezionare Aggiungi origine nella casella vuota.

  8. Impostare Le impostazioni di origine su:

    1. Nome flusso di output: 'C19csv'
    2. Descrizione: lasciare vuoto
    3. Tipo di origine: inline
    4. Tipo di set di dati inline: testo delimitato
    5. Servizio collegato: selezionare il data lake in cui è stato archiviato il csv

  9. Impostare le opzioni di origine su:

    1. Modalità file: File
    2. Percorso file: /bronze/ Covid-19_Vaccination_Case _Trends
    3. Consenti nessun file trovato: lasciare deselezionato
    4. Change data capture( Modifica acquisizione dati): lasciare deselezionata
    5. Tipo di compressione: Nessuno
    6. Codifica: predefinita (UTF-8)
    7. Delimitatore di colonna: virgola (,)
    8. Delimitatore di riga: Predefinito(\r, \n o\r\n)
    9. Carattere virgolette: virgolette doppie (")
    10. Carattere di escape: barra rovesciata ()
    11. Prima riga come intestazione: CHECKED
    12. Lasciare il resto come impostazioni predefinite

  10. Selezionare il piccolo + Accanto all'origine creata e selezionare Sink

  11. Creare il sink in cui vengono archiviati il formato e la posizione dei dati da archiviare per spostare i dati da un csv in 'bronze' a una tabella delta in 'gold'.

    1. Impostare i valori sink (lasciare tutte le impostazioni come predefinite se non specificato)
    2. Tipo di sink: inline
    3. Tipo di set di dati inline: Delta
    4. Servizio collegato: lo stesso data lake usato nell'origine, perché verrà archiviato in un contenitore diverso.

  12. Impostare i valori dell'impostazione (lasciare tutte le impostazioni predefinite, se non specificato)

    1. Percorso cartella: gold/Covid19 Vaccine and Case Trends

  13. È necessario immettere il valore perché questo nome è il modo in cui si desidera archiviare i dati e non esiste da selezionare.

  14. Selezionare Convalida, in questo modo viene controllato il flusso di dati e vengono fornite istruzioni per correggere eventuali errori.

  15. Selezionare Pubblica tutto.

  16. Selezionare il + pulsante e selezionare pipeline dal menu a discesa

  17. Assegnare alla pipeline il nome "CSV to Delta C19 Vax Trends"

  18. Selezionare il flusso di dati creato nei passaggi precedenti da CSV a Delta (C19VaxTrends) e trascinarlo nella scheda della pipeline aperta.

  19. Selezionare Convalida

  20. Selezionare Pubblica

  21. Selezionare Debug (usa runtime attività) per eseguire la pipeline.

    Consiglio

    Se si verificano errori per spazi o caratteri inappropriati per il formato differenziale: aprire il file CSV scaricato e apportare correzioni. Quindi ricaricare e sovrascrivere il csv nella zona bronze. Eseguire quindi di nuovo la pipeline.

  22. Passare al contenitore gold nel data lake e verrà ora visualizzata la nuova tabella Delta creata durante la pipeline.

Analizzare gli asset

Se non sono stati analizzati gli asset di dati nel Microsoft Purview Data Map, è possibile seguire questa procedura per popolare la mappa dati.

L'analisi delle origini nel patrimonio dati raccoglierà automaticamente i metadati degli asset di dati (tabelle, file, cartelle, report e così via) in tali origini. Registrando un'origine dati e creando l'analisi, si stabilisce la proprietà tecnica delle origini e degli asset visualizzati nel catalogo e si garantisce di avere il controllo su chi può accedere ai metadati in Microsoft Purview. Registrando e archiviando origini e asset a livello di dominio, verrà archiviato al livello più alto della gerarchia di accesso. In genere è consigliabile creare alcune raccolte in cui si analizzano i metadati degli asset e si stabilisce la gerarchia di accesso corretta per tali dati.

Se si è scelto di usare Microsoft Fabric o SQL, è possibile usare queste guide per fornire l'accesso:

Registrare il data lake e analizzare gli asset

  1. In Microsoft Purview Data Map nella scheda domini selezionare le assegnazioni di ruolo per il dominio (sarà il nome dell'account Microsoft Purview):

    1. Aggiungere se stessi come amministratore dell'origine dati e come curatore dei dati al dominio.
      1. Selezionare l'icona della persona accanto al ruolo Amministratore origine dati.
      2. Cerca il tuo nome così com'è in Microsoft Entra ID (potrebbe essere necessario immettere il nome completo digitato esattamente come è in Microsoft Entra ID).
      3. Selezionare OK.
      4. Ripetere questi passaggi per il curatore dei dati.

  2. Registrare il data lake:

    1. Selezionare la scheda Origini dati .
    2. Selezionare Registra.
    3. Selezionare il tipo di archiviazione Azure Data Lake Storage Gen2.

  3. Specificare i dettagli per la connessione:

    1. Sottoscrizione (facoltativa)
    2. Nome origine dati (questo sarà il nome dell'origine ADLS Gen2)
    3. Raccolta in cui archiviare i metadati degli asset (facoltativo)
    4. Selezionare Registra

  4. Al termine della registrazione dell'origine dati, è possibile configurare l'analisi. La registrazione indica che Microsoft Purview è connesso all'origine dati e lo ha inserito nella raccolta corretta per la proprietà. L'analisi leggerà quindi i metadati dall'origine e popola gli asset nella mappa dati.

  5. Selezionare l'origine registrata nella scheda Origini dati

  6. Selezionare una nuova analisi e specificare i dettagli:

    1. Usare il runtime di integrazione predefinito per questa analisi
    2. Le credenziali devono essere Microsoft Purview MSI (system)
    3. Il livello di analisi è Rilevamento automatico
    4. Selezionare una raccolta o usare il dominio (la raccolta deve essere la stessa raccolta o la stessa raccolta figlio di in cui è stata registrata l'origine dati)
    5. Selezionare Continua

    Consiglio

    A questo punto Microsoft Purview testerà la connessione per verificare che sia possibile eseguire un'analisi. Se non è stato concesso l'accesso al lettore MSI di Microsoft Purview nell'origine dati, l'operazione avrà esito negativo. Se non si è il proprietario dell'origine dati o si dispone di un collaboratore per l'accesso utente, l'analisi avrà esito negativo perché si prevede di avere l'autorizzazione per creare la connessione.

  7. Selezionare ora solo il contenitore "gold" in cui è stata inserita la tabella delta nella sezione dei dati di compilazione dell'esercitazione. Ciò impedirà l'analisi di eventuali altri asset di dati presenti nell'archivio dati.

    1. Dovrebbe avere un solo assegno blu accanto all'oro, è possibile lasciare i controlli accanto a tutto perché analizzerà l'origine completa e creerà comunque gli asset che useremo e altro ancora.
    2. Selezionare Continua

  8. Nella schermata selezionare un set di regole di analisi è consigliabile usare il set di regole di analisi predefinito.

  9. Selezionare Continua

  10. In impostare un trigger di analisi si imposterà la frequenza dell'analisi in modo da continuare ad aggiungere asset di dati al contenitore gold del lago che continuerà a popolare la mappa dati. Selezionare Una volta.

  11. Selezionare Continua.

  12. Selezionare Salva ed esegui. Verrà creata un'analisi che leggerà solo i metadati dal contenitore gold del data lake e popola la tabella che verrà usata in Microsoft Purview Unified Catalog nelle sezioni successive. Se si seleziona solo Salva, l'analisi non verrà eseguita e gli asset non verranno visualizzati. Dopo l'esecuzione dell'analisi, verrà visualizzata l'analisi creata con lo stato Ultima esecuzionein coda. Quando le letture dell'analisi completano gli asset sono pronti per la sezione successiva. Questa operazione potrebbe richiedere alcuni minuti o ore a seconda del numero di asset presenti nell'origine.

Passaggio 3: Pubblicare i prodotti dati

La creazione di prodotti dati è essenziale per garantire che i dati corretti siano resi individuabili dall'organizzazione. I prodotti dati consentono di evitare il sovragoverno dei dati che sono bassi o non hanno valore nel patrimonio dati perché non hanno alcun utilizzo o valore limitato. Assicurarsi che gli esperti di dati stiano per pubblicare i prodotti dati attiveranno i dati più importanti e creeranno il livello di governance corretto in base a tale valore. La cura di asset che i team tecnici non conoscono lo scopo aziendale o il tentativo di governare tutto ciò che è nel complesso e crescente patrimonio di dati causerà più tempo e perdita di produttività inseguendo i dettagli dei dati che potrebbero non essere mai usati o che potrebbero essere semplicemente rimossi dalla proprietà. Concentrarsi invece sui dati che hanno valore e che le persone devono individuare e creare ancora più valore. Man mano che i team usano più dati e ottengono una migliore comprensione di ciò che è necessario o è possibile creare prodotti dati più utili per soddisfare tali esigenze e la governance può adattarsi per garantire che rimanga sempre la dimensione corretta in base al valore e alla sensibilità dei dati.

Prerequisiti

Creare e pubblicare un prodotto dati

  1. Aprire il portale di Microsoft Purview.

  2. Selezionare Unified Catalog.

  3. Selezionare Gestione catalogo e quindi Domini di governance.

  4. Nella pagina Domini di governance selezionare il dominio Integrità personale

  5. Selezionare il collegamento Vai ai prodotti dati in Concetti aziendali

  6. Qui gli esperti di dati chiamati proprietari dei prodotti dati identificheranno gli asset di dati che devono essere utilizzati da altri utenti dell'organizzazione e forniranno le informazioni necessarie per renderli utilizzabili.

  7. Selezionare Nuovo prodotto dati

  8. Fornire informazioni dettagliate sul prodotto dati

    1. Nome: "Covid-19 Vaccinazione e tendenza dei casi in base all'età"
    2. Descrizione: "Questi dati provengono dal CDC come parte del Dipartimento della Salute degli Stati Uniti & Servizi Umani. I dati contengono tendenze nelle vaccinazioni e nei casi per fascia di età, a livello nazionale degli Stati Uniti. I dati vengono stratificati da almeno una dose e completamente vaccinati. I dati rappresentano anche tutti i partner per i vaccini, tra cui cliniche partner giurisdizionali, farmacie al dettaglio, strutture di assistenza a lungo termine, centri di dialisi, agenzia federale per la gestione delle emergenze e siti partner dell'amministrazione delle risorse e dei servizi sanitari e strutture di entità federali."
    3. Tipo: Set di dati
    4. Selezionare Avanti.
    5. Casi d'uso: "Questi dati sono forniti per uso pubblico e hanno lo scopo di aiutare a comprendere le tendenze della vaccinazione verso l'alto e i nuovi casi da diverse fasce di età. Le età sono raggruppate in due gruppi che vanno da <2 anni a oltre 65 anni. Analogamente, le tendenze sono fornite in numeri giornalieri che forniscono la media di sette giorni dei nuovi casi per fascia di età."
    6. Contrassegna come Approvato come selezionato.
    7. Seleziona Salva.

  9. A questo momento sono stati compilati i metadati di base del prodotto dati. Aggiungere quindi alcune proprietà e mappare l'asset dalla mappa dati.

  10. Selezionare il pulsante + Aggiungi asset di dati .

  11. Verranno visualizzati gli asset analizzati nella mappa dati, che includerà tutte le cartelle e i livelli dell'origine dati.

  12. Cercare l'asset Covid19 Vaccine and Case Trends aggiunto al contenitore gold del data lake e selezionare questo set di risorse.

  13. Selezionare Aggiungi. È possibile selezionare tutti gli asset necessari per un prodotto dati, ma qui ne è necessario solo uno.

    Consiglio

    Provare il pulsante Ottieni suggerimenti per fare in modo che GenAI selezioni gli asset nella mappa dati e selezioni il vaccino Covid19 e le tendenze dei casi da un elenco ridotto di risultati.

  14. È ora possibile visualizzare l'asset aggiunto al prodotto dati.

  15. Selezionare + Aggiungi termine accanto al titolo dei termini del glossario

  16. Selezionare il termine di epidemia creato in precedenza e selezionare Aggiungi

  17. Dovrebbe essere visualizzato l'elemento dati critico per la fascia di età dall'asset mappato al prodotto dati.

  18. Selezionare + Aggiungi OKR accanto al titolo OKR

  19. Selezionare Riduci il rischio di pandemia abilitando l'adozione efficace del vaccino per i pazienti. È l'obiettivo creato nella prima sezione.

Gestire i criteri di richiesta di accesso ai prodotti dati

Nella parte superiore della pagina, l'ultimo passaggio prima di pubblicare il prodotto dati consiste nel selezionare il pulsante Gestisci criteri . In questo caso i criteri di accesso e il flusso di lavoro di accesso delle richieste vengono configurati effettuando selezioni e fornendo i nomi per l'approvazione. È anche possibile usare la scheda Criteri ereditati per visualizzare i criteri di dominio di governance applicati per l'attestazione delle copie dei dati applicata in precedenza. È lo stesso per l'approvazione del manager richiesta dal termine di glossario dell'epidemia.

  1. Selezionare la scheda Gestisci criteri .

  2. In Limite di tempo di accesso specificare i dettagli per quanto tempo la richiesta di accesso è valida prima di dover essere rinnovata. Verrà impostato in modo da concedere l'accesso per un massimo di un anno.

  3. Nella casella, metti 1.

  4. Selezionare anni nell'elenco a discesa.

  5. In Requisiti di approvazione specificare il nome nella casella responsabili approvazione. (Richiederà il nome registrato in Microsoft Entra ID)

    Nota

    Non è necessario controllare l'approvazione del responsabile perché tale criterio è ereditato dal termine di glossario dell'epidemia.

  6. Selezionare il pulsante Modulo di richiesta di anteprima per visualizzare i consumer del catalogo quando si richiede l'accesso. Verranno visualizzati l'attestazione della copia dei dati e l'approvazione del manager necessari perché sono stati impostati dal dominio di governance e dal termine del glossario.

  7. Selezionare Salva modifiche.

Dopo aver eseguito il mapping degli asset di dati e aver configurato i criteri di accesso, è possibile pubblicare il prodotto dati nel catalogo.

  1. Selezionare Pubblica nel prodotto dati.

  2. Provare a creare un report di profitto in altri domini creati in precedenza

    1. Report profitto, tipo: dashboard/report.
    2. Product Master, Type: dati maser e dati di riferimento.

Nota

È possibile aggiungere molti asset a questi e vedere l'aspetto di un prodotto dati con molti asset e i prodotti dati ai termini di qualsiasi dominio per vedere come viene usato il glossario per descrivere i dati usando un set coerente di termini.

Passaggio 4: Eseguire la qualità dei dati

Ora che nel catalogo è disponibile un prodotto dati, l'esecuzione di regole di qualità dei dati indicherà a tutti che i dati sono in buona forma e pronti per essere usati. Man mano che si apprendono altre informazioni sulle nuove regole di qualità dei dati, è possibile aggiungerle per assicurarsi che siano adatte a tutti i casi d'uso. Garantire che i prodotti dati siano della massima qualità aiuterà a creare fiducia nei dati e a indicare ad altri utenti che viene monitorato un miglioramento. Man mano che il valore dei dati aumenta, la qualità di tali dati dovrà essere monitorata e controllata più da vicino perché i problemi di qualità dei dati possono causare impatti elevati se gestiti in modo non corretto.

Prerequisiti

  • Le regole di qualità dei dati possono essere eseguite solo in tabelle di formato differenziale in ADLS Gen2 e Microsoft Fabric.
  • L'identità gestita di Microsoft Purview deve essere abilitata per leggere l'origine dati perché è attualmente l'unica credenziale supportata per la qualità dei dati.
  • È necessario avere il ruolo di amministratore della qualità dei dati nel dominio di governance in cui si esegue la qualità dei dati.
  • È necessario essere il proprietario o disporre dell'accesso dell'amministratore dell'accesso utente all'origine dati in cui si sta connettendo l'analisi della qualità dei dati per garantire l'autorizzazione di sicurezza appropriata per analizzare i dati.
  • Per eseguire profili nei dati, è necessario disporre del ruolo di amministratore del profilo dati .

Creare ed eseguire regole di qualità dei dati

  1. Aprire il portale di Microsoft Purview.

  2. Selezionare Unified Catalog.

  3. Selezionare la scheda Qualità dei dati in Gestione dati.

  4. Selezionare il dominio di integrità personale creato nella sezione 1.

  5. Selezionare il pulsante Gestisci e selezionare Connections dal menu. La creazione di questa connessione garantisce la possibilità di eseguire analisi della qualità dei dati nell'origine dati in tale dominio di governance, impedendo ai team di ottenere l'accesso alla conoscenza dei dati senza un'autorizzazione appropriata.

  6. Selezionare Nuovo nella schermata delle connessioni per creare una nuova connessione:

    1. Specificare il nome visualizzato 'Personal Health ADLSg2 DQ'.
    2. Selezionare il tipo di origine di Azure Data Lake Storage Gen2.
      1. Specificare i dettagli dell'origine dati creata nella sezione 2.

        Nota

        Le credenziali devono essere Microsoft Purview MSI (sistema) per una connessione data quality

      2. Selezionare Test connessione
      3. Dopo aver testato la connessione, selezionare Invia

Dopo aver stabilito la connessione, è possibile eseguire i profili e iniziare a creare regole di qualità dei dati. Ciò garantisce che gli esperti che conoscono le regole di business e le regole appropriate siano in esecuzione sui prodotti dati più importanti.

  1. Indietro alla pagina Qualità dei dati.
  2. Selezionare il dominio di governance dell'integrità personale.
  3. Selezionare il prodotto dati Covid-19 Vaccination and Case Trending by Age compilato nella sezione 3.
  4. Selezionare l'asset aggiunto al prodotto dati. (Deve essere in formato differenziale dalla sezione 2 o la qualità dei dati non verrà eseguita).
  5. Applicare regole di qualità dei dati alle colonne dei dati per misurare se soddisfa le aspettative di qualità:
    1. Selezionare la scheda Regole nell'asset selezionato.
    2. Selezionare Nuova regola.
    3. Selezionare La regola Campi vuoti/vuoti.
    4. Specificare i dettagli:
      • Selezionare la colonna AgeGroupVacc dall'elenco a discesa della colonna
      • Nome regola: Verificare che esista una fascia di età per la vaccinazione
    5. Selezionare Crea.
    6. Selezionare Nuova regola.
    7. Selezionare Corrispondenza tipo di dati.
    8. Specificare i dettagli.
    9. Selezionare DataColonna gestita.
    10. Selezionare Crea.
  6. Selezionare Esegui analisi qualità dati.

Dati del profilo

Creare un profilo per i dati per visualizzare i dati statici di alto livello di ogni colonna e individuare eventuali anomalie che potrebbero avere una nuova regola.

  1. In Unified Catalog selezionare Gestione integrità e quindi Qualità dei dati.
  2. Selezionare i dati del profilo
  3. Selezionare la casella in alto accanto a Nome colonna per profilare tutte le colonne. Microsoft Purview consiglierà quali colonne profilare ed è possibile selezionare le colonne che si sa vale la pena profilare per impedire che i profili su dati altamente sensibili o dati noti vengano popolati in modo sparse.
  4. Selezionare Esegui profilo

Al termine dell'analisi, sarà possibile esaminare il punteggio e il profilo di qualità dei dati per il nuovo prodotto dati e il punteggio di qualità dei dati sarà disponibile per tutti gli utenti del catalogo assicurandosi che tutti conoscano lo stato dei dati.

Creare una pianificazione per le analisi della qualità dei dati per assicurarsi di monitorare continuamente i problemi di qualità dei dati. Impostare gli avvisi per assicurarsi di risolvere i problemi di qualità dei dati prima che i consumer siano interessati.

  1. In Gestione dell'integrità selezionare Qualità dei dati.
  2. Selezionare il dominio Integrità personale in cui sono configurate le regole di qualità dei dati.
  3. Nell'elenco a discesa Gestisci selezionare Analisi pianificate.
  4. Nella pagina Scansioni pianificate selezionare Nuovo.
  5. Aggiungere i dettagli della panoramica
    1. Nome: Valutazione mensile DQ integrità personale
    2. Descrizione: analisi mensile delle regole DQ per il miglioramento continuo.
  6. Selezionare Continua
  7. Selezionare l'ambito dell'analisi
  8. Selezionare la casella accanto al prodotto dati Covid-19 Vaccination and Case Trending by Age
  9. Selezionare Continua
  10. Pianificare l'analisi per assicurarsi che venga eseguita l'ultimo giorno di ogni mese
    1. Selezionare Ricorrente
    2. Ricorrenza: ogni mese
    3. Giorni mese: Ultimo
    4. Orario analisi pianificazione (UTC): 12:00:00
    5. Start recurrence at (UTC): leave as default
  11. Selezionare Continua
  12. Esaminare i dettagli dell'analisi per verificare se sono presenti modifiche da apportare prima del salvataggio.
  13. Seleziona Salva. Poiché in precedenza è stata attivata un'analisi manuale, non è necessario attivare un'altra analisi ora, ma se è necessaria una nuova analisi, selezionare Salva ed esegui.

Configurare gli avvisi

Dopo che la qualità dei dati ha pianificato le analisi, è possibile attivare avvisi per comunicare agli amministratori se sono necessari problemi o attenzione a causa di problemi di qualità dei dati o errori di analisi. Configurare un avviso di qualità dei dati per le analisi non riuscite e quando il punteggio diminuisce di oltre il 5%.

  1. Indietro al dominio Integrità personale nella pagina Qualità dati.
  2. Nell'elenco a discesa Gestisci selezionare Avvisi.
  3. Selezionare Nuovo.
  4. Immettere i dettagli dell'avviso
    1. Nome visualizzato: Analisi mensile DQ integrità personale
    2. Descrizione: per garantire che le soglie minime di DQ soddisfino le aspettative dei consumatori.
    3. Destinazione: il punteggio diminuisce di più di
    4. Soglia: 5
    5. Disattiva notifiche: lasciare deselezionata
    6. Attivare la notifica per le analisi della qualità non riuscite: lasciare selezionata
    7. Destinatario: immettere il nome
  5. Selezionare Continua.

Consiglio

Quando si implementa nel Unified Catalog si desidera inviare gli avvisi agli amministratori che possono notificare il problema ai consumatori e collaborare con il proprietario tecnico dei dati per apportare correzioni.

Alla fine di questa sezione si avrà ora un Unified Catalog funzionante con qualità dei dati operativi per gestire i dati offerti ai consumer di dati dell'organizzazione. Tutto è stato per ottenere i dati più preziosi per il consumer e creare fiducia nei dati che avrebbero usato. Man mano che il valore dei dati aumenta e emergono nuove strategie di dati, la sezione successiva illustra come gestire l'intero catalogo o approfondire la gestione dei dati specifica con i dati master.

Passaggio 5: Gestione dei dati master

La gestione dei dati master è la pratica di conformità alle entità dati più importanti che devono essere accurate, univoche e applicate in modo coerente in tutte le aree dell'azienda perché errori e problemi in questi dati possono influire sull'intera azienda. Tramite uno dei nostri partner MDM, sarà possibile integrare la soluzione Master Gestione dati (MDM) con Microsoft Purview per abilitare l'unificazione, la standardizzazione e la pulizia dei dati che consentiranno la creazione di record aurei e la pubblicazione di dati master come prodotti dati.

Seguire le esercitazioni qui per la soluzione scelta: Gestione dei dati master in Microsoft Purview

Passaggio 6: Gestire l'integrità dei dati

In Microsoft Purview Data Estate Health, l'Ufficio dati centrale e altri responsabili dei dati sono in grado di valutare lo stato dei dati in base agli standard aziendali e gestire in modo efficace i progressi verso la strategia. Per assicurarsi che tutti i membri dell'azienda sappiano cosa si può fare per aumentare il valore dei dati, è essenziale che gli standard siano compresi e scalabili per l'intera organizzazione senza dover fare di tutti un esperto di governance dei dati. A partire da un set standard di controlli del settore disponibili in Microsoft Purview in ogni data office e personalizzare i controlli per soddisfare le aspettative e assicurarsi che siano allineati agli obiettivi dei dati. Fondamentale per l'efficacia di questi controlli non è solo la misurazione di questi standard, ma anche la garanzia che i responsabili dei dati siano in grado di intervenire autonomamente e di essere ritenuti responsabili di apportare i miglioramenti che influiscono sul valore dei dati. In Data Estate Health è possibile impostare e gestire tutte queste funzionalità critiche.

Prerequisiti

Valutare la governance dei dati con l'integrità del data estate

  1. Aprire il portale di Microsoft Purview.

  2. Selezionare Unified Catalog.

  3. In Data Estate Health nel riquadro di spostamento a sinistra selezionare Controlli integrità.

  4. Selezionare la carota > accanto al gruppo di controllo Creazione valore .

  5. Durante il passaggio del mouse su un titolo del controllo, selezionare l'icona a matita per modificare il controllo. Modificando il controllo, si modifica la soglia del controllo per impostare le aspettative sul punteggio e si imposta l'assegnazione dei colori per illustrare le fasi di avanzamento.

  6. I dettagli consentono di fornire una descrizione del controllo e del relativo significato per l'organizzazione e di impostare un proprietario per un controllo specifico.

  7. Selezionare la scheda Regole del controllo per modificare la soglia. Ciò dimostra che ha una destinazione elevata e se non è integro è fondamentale eseguire il follow-up.

    1. Eredita dal gruppo: attiva/disattiva (dovrebbe diventare grigio).
    2. Punteggio di destinazione: 90
    3. Selezionare Nuova regola.
    4. Impostare la casella accanto al punteggio su GreaterThanOrEqual
    5. Impostare la percentuale su 90
    6. Stato = Integrità (verde)
    7. Else Box Status = Critical (Purple)
    8. Seleziona Salva.

  8. In Integrità dell'area dati selezionare Qualità metadati.

Qui è possibile modificare o aggiungere regole che creano i punteggi del controllo. In questo caso si vuole modificare la gravità delle azioni per la creazione di valore per garantire che tutti gli utenti conoscano l'importanza di questa azione.

  1. Selezionare Configura gravità
  2. Selezionare il gruppo di controllo Creazione valore
  3. Selezionare il titolo del controllo di allineamento OKR business
  4. Modificare la gravità da Media a Alta e selezionare Salva
  5. Selezionare la scheda Azioni di integrità
  6. Filtro assegnato a: al proprio nome
  7. Selezionare un'azione in cui è possibile vedere cosa deve fare il proprietario dell'azione per garantire che le aspettative di governance siano soddisfatte o che possa assegnare un nuovo proprietario per ottenere il miglior esperto per fornire il proprio input. C'è anche uno stato che consente ad altri utenti di conoscere il lavoro in corso e dove altre azioni potrebbero richiedere la definizione delle priorità.

Passaggio 7: Democratizzazione dei dati

Consentire agli utenti di trovare e accedere ai dati necessari in un modo di reclamo è l'essenza della democratizzazione dei dati e garantisce che le persone possano trovare i dati necessari per creare valore aziendale. Offrire un'esperienza pulita e semplice per individuare i dati è lo scopo di Microsoft Purview Unified Catalog, consentendo al tempo stesso agli amministratori di aggiornare e gestire i dati resi disponibili nel catalogo su larga scala. In questa sezione viene illustrato come gli utenti possono trovare e richiedere l'accesso ai dati e assicurarsi che i responsabili approvazione appropriati siano in grado di tenere traccia e fornire input su tali richieste di accesso.

Prerequisiti

Individuare i prodotti dati

  1. In Unified Catalog selezionare Individuazione e quindi Prodotti dati.
  2. Nella pagina Prodotti dati usare la barra di ricerca per cercare i tassi di vaccinazione in base all'età.
  3. Qui vengono visualizzati i prodotti dati pubblicati nella sezione 2. Questo mostra come gli utenti verranno esposti solo ai dati destinati a individuare e impedisce agli utenti di dover navigare in un data estate altamente tecnico.
  4. Selezionare il prodotto dati Covid-19 Vaccination and Case Trending by Age
    1. In questo caso, i consumer possono visualizzare i metadati forniti e qualsiasi altra proprietà configurata durante l'installazione. Il punteggio di qualità dei dati è anche qui in modo che i consumatori conoscano la qualità prima ancora di ottenere l'accesso ai dati.
    2. Selezionare l'asset e il consumer può visualizzare tutte le colonne in sono disponibili nell'asset di dati.
    3. Selezionare il termine glossario dell'epidemia e il consumer può visualizzare la descrizione e altre informazioni sul termine per ottenere una comprensione più approfondita dei dati.
  5. Una volta che il consumer è sicuro di voler usare tali dati, deve ottenere l'accesso approvato ai dati.
    1. Selezionare Richiedi accesso
    2. Compilare i dettagli del modulo per inviare una richiesta.
    3. Utente: lasciare il nome
    4. Approvazione manager: richiesta e indirizzata automaticamente al responsabile Microsoft Entra ID.
    5. Scopo: selezionare uno scopo
    6. Giustificazione aziendale: monitoraggio OKR
    7. Selezionare la casella accanto all'attestazione per dire di comprendere le aspettative di utilizzo di questi dati.
    8. Selezionare Invia.

La richiesta di accesso verrà ora inviata all'elenco gestito in Microsoft Entra ID. Da qui, il manager può accedere alle richieste aprendo il messaggio di posta elettronica e selezionando un collegamento o accedendo a Microsoft Purview. L'approvazione e la gestione dell'accesso possono essere eseguite direttamente in Microsoft Purview.

  1. In Unified Catalog selezionare Gestione catalogo e quindi Richieste.
  2. Selezionare il dominio Integrità personale .
  3. Selezionare la richiesta inviata.
  4. Ora i responsabili approvazione possono approvare o rifiutare selezionando Rispondi alla richiesta.