Integrazione di Microsoft Purview e Profisee per la gestione dei dati master (MDM)
I sistemi aziendali possono avere più origini di dati master, ovvero i dati comuni condivisi tra i sistemi. Questo fatto può diventare evidente quando si cataloga le origini dati. Esempi di dati master includono i dati di clienti, prodotti, località, asset e fornitori. Quando si usa Profisee per unire, convalidare e correggere i dati master, è possibile renderli effettivi. In particolare, è possibile usarlo per creare una piattaforma attendibile comune per l'analisi e il miglioramento operativo. Usando le definizioni di governance, le informazioni dettagliate e le competenze dettagliate in Microsoft Purview, è possibile creare la piattaforma in modo efficace.
Questa architettura di riferimento presenta una soluzione di governance e gestione dei dati che include Microsoft Purview e la piattaforma MDM (Profisee Master Data Management). Questi servizi interagiscono per fornire una base di dati attendibili e di alta qualità che ottimizzano il valore aziendale dei dati in Azure. Per un breve video su questa soluzione, vedere La potenza della gestione dei dati master completamente integrata in Azure.
Architettura
Il diagramma seguente illustra i passaggi da eseguire quando si sviluppa e si gestisce la soluzione di dati master. Considerare questi passaggi come altamente iterativi. Man mano che la soluzione si evolve, è possibile ripetere questi passaggi e fasi, a volte automaticamente e talvolta manualmente. L'uso di passaggi automatici o manuali dipende dalle modifiche apportate alla soluzione di dati master, ai metadati e ai dati.
Flusso
I metadati e il flusso di dati includono questi passaggi, illustrati nella figura precedente:
I connettori Microsoft Purview predefiniti vengono usati per compilare un Unified Catalog dalle applicazioni aziendali di origine. I connettori analizzano le origini dati e popolano Unified Catalog.
Il modello di dati master viene pubblicato in Microsoft Purview. Le entità dati master create in Profisee MDM vengono pubblicate facilmente in Microsoft Purview. Questo passaggio popola ulteriormente il Unified Catalog e garantisce che sia presente un record di questa origine critica di dati in Microsoft Purview.
Gli standard e i criteri di governance per la gestione dei dati vengono usati per arricchire le definizioni delle entità dati master. I dati vengono arricchiti in Microsoft Purview con dizionario dati e informazioni glossarie, dati di proprietà e classificazioni dei dati sensibili. Tutte le definizioni e i metadati disponibili in Microsoft Purview sono visibili in tempo reale in Profisee come indicazioni per gli amministratori dei dati MDM.
I dati master dai sistemi di origine vengono caricati in Profisee MDM. Un set di strumenti di integrazione dei dati come Azure Data Factory estrae i dati dai sistemi di origine usando più di 100 connettori predefiniti o un gateway REST. Più flussi di dati master vengono caricati in Profisee MDM.
I dati master vengono standardizzati, abbinati, uniti, arricchiti e convalidati in base alle regole di governance. Altri sistemi, ad esempio Microsoft Purview, potrebbero definire regole di governance e qualità dei dati. Ma Profisee MDM è il sistema che applica queste regole. I record di origine vengono confrontati e uniti all'interno e tra i sistemi di origine per creare il record più completo e corretto possibile. Le regole di qualità dei dati controllano ogni record per verificare la conformità ai requisiti aziendali e tecnici. Qualsiasi record che non riesce a convalidare o che restituisce un punteggio di probabilità basso è soggetto a correzione. Per correggere le convalide non riuscite, un processo del flusso di lavoro assegna i record che richiedono la revisione agli amministratori dei dati esperti nel dominio dei dati aziendali. Dopo che un record è stato verificato o corretto, è pronto per l'uso come master di record golden .
I dati transazionali vengono caricati in una soluzione di analisi downstream. Un set di strumenti di integrazione dati, ad esempio Data Factory, estrae dati transazionali dai sistemi di origine usando più di 100 connettori predefiniti o un gateway REST. Il set di strumenti carica i dati direttamente in una piattaforma di dati di analisi come Azure Synapse Analytics. L'analisi di queste informazioni non elaborate senza i dati golden master appropriati è soggetta a inesattezze, perché le sovrapposizioni dei dati, le mancata corrispondenza e i conflitti non sono ancora stati risolti.
I connettori di Power BI consentono l'accesso diretto ai dati master curati. Gli utenti di Power BI possono usare i dati master direttamente nei report. Un connettore Power BI dedicato riconosce e applica la sicurezza basata sui ruoli. Nasconde inoltre vari campi di sistema per semplificare l'uso.
I dati master curati e di alta qualità vengono pubblicati in una soluzione di analisi downstream. Se i record di dati master sono stati uniti in un singolo record golden, i collegamenti padre-figlio ai record originali vengono mantenuti.
La piattaforma di analisi ha un set di dati certificati nel senso che sono completi, coerenti e accurati. Tali dati includono dati master correttamente curati e dati transazionali associati. Questa combinazione costituisce una solida base di dati attendibili disponibili per ulteriori analisi.
I dati master di alta qualità vengono visualizzati e analizzati e vengono applicati i modelli di Machine Learning. Il sistema offre informazioni dettagliate sul suono per guidare l'azienda.
Componenti
Microsoft Purview è una soluzione di governance dei dati che offre un'ampia visibilità sui data estate locali e cloud. Microsoft Purview offre una combinazione di individuazione e classificazione dei dati, derivazione, ricerca e individuazione dei metadati e informazioni dettagliate sull'utilizzo. Tutte queste funzionalità consentono di gestire e comprendere i dati nel panorama dei dati aziendali.
Profisee MDM è una piattaforma MDM veloce e intuitiva che si integra perfettamente con le tecnologie Microsoft e l'ecosistema di gestione dei dati di Azure.
Data Factory è un servizio di integrazione dei dati ibrido. È possibile usare Data Factory per creare, pianificare e orchestrare l'estrazione, la trasformazione e il caricamento (ETL) ed estrarre, caricare e trasformare flussi di lavoro (ELT). Data Factory offre anche più di 100 connettori predefiniti e un gateway REST che è possibile usare per estrarre dati dai sistemi di origine.
Azure Synapse Analytics è un data warehouse cloud veloce, flessibile e attendibile che usa un'architettura di elaborazione parallela di grandi dimensioni. È possibile usare Azure Synapse Analytics per ridimensionare, calcolare e archiviare i dati in modo elastico e indipendente.
Power BI è una suite di strumenti di analisi aziendale che offre informazioni dettagliate in tutta l'organizzazione. È possibile usare Power BI per connettersi a centinaia di origini dati, semplificare la preparazione dei dati e promuovere l'analisi improvvisata. È anche possibile produrre report accattivanti e quindi pubblicarli affinché l'organizzazione possa utilizzarli sul Web e sui dispositivi mobili.
Alternative
Se non si dispone di un'applicazione MDM dedicata, è possibile trovare alcune delle funzionalità tecniche necessarie per creare una soluzione MDM in Azure:
- Qualità dei dati. Quando si caricano dati in una piattaforma di analisi, è possibile creare qualità dei dati nei processi di integrazione. Ad esempio, è possibile usare script hardcoded per applicare trasformazioni di qualità dei dati in una pipeline di Data Factory .
- Standardizzazione e arricchimento dei dati. Mappe di Azure può fornire la verifica e la standardizzazione dei dati per i dati degli indirizzi. È possibile usare i dati standardizzati in Funzioni di Azure e Data Factory. Per standardizzare altri dati, potrebbe essere necessario sviluppare script hardcoded.
- Gestione dei dati duplicati. È possibile usare Data Factory per deduplicazione delle righe se sono disponibili identificatori sufficienti per una corrispondenza esatta. È probabile che siano necessari script hardcoded personalizzati per implementare la logica necessaria per unire le righe corrispondenti applicando le tecniche di sopravvivenza dei dati appropriate.
- Gestione dei dati. È possibile usare Power Apps per sviluppare rapidamente soluzioni di gestione dei dati di base per gestire i dati in Azure. È anche possibile sviluppare interfacce utente appropriate per revisioni, flussi di lavoro, avvisi e convalide.
Negli ambienti incentrati su Microsoft, Azure Synapse Analytics è preferibile come servizio di analisi. È tuttavia possibile usare qualsiasi database di analisi. Snowflake e Databricks sono scelte comuni.
Dettagli dello scenario
Man mano che aumenta la quantità di dati caricati in Azure, aumenta la necessità di gestire e gestire correttamente i dati in tutte le origini dati e i consumer di dati. I dati che sembrano adeguati nel sistema di origine sono spesso insufficienti quando sono condivisi. Potrebbero essere presenti informazioni mancanti o incomplete oppure duplicazioni e conflitti. La sua qualità complessiva potrebbe essere scarsa. Sono necessari dati completi, coerenti e accurati.
Senza dati di alta qualità nel data estate di Azure, il valore aziendale di Azure viene compromesso, forse in modo critico. La soluzione consiste nel creare una base per la governance e la gestione dei dati in grado di produrre e fornire una fonte di verità per dati attendibili e di alta qualità. Microsoft Purview e Profisee MDM collaborano per formare questa piattaforma aziendale.
Microsoft Purview cataloga tutte le origini dati e identifica eventuali informazioni sensibili e derivazione. Offre all'architetto dei dati un posto in cui prendere in considerazione gli standard di dati appropriati da imporre a tutti i dati. Microsoft Purview è incentrato sulla governance per trovare, classificare e definire criteri e standard. Le attività relative all'applicazione di criteri e standard, alla catalogazione delle origini dati e alla correzione di dati carenti rientrano in tecnologie come i sistemi MDM.
Profisee MDM è progettato per accettare dati master da qualsiasi origine. Profisee MDM quindi corrisponde, unisce, standardizza, verifica, corregge e sincronizza i dati tra i sistemi. Questo processo garantisce che i dati possano essere integrati correttamente e che soddisfino le esigenze dei sistemi downstream, ad esempio business intelligence (BI) e applicazioni di Machine Learning. La piattaforma Integrative Profisee applica gli standard di governance tra più silo di dati.
Insieme è meglio
Microsoft Purview e Profisee MDM funzionano meglio insieme. Se integrati, semplificano le attività di gestione dei dati e garantiscono che tutti i sistemi funzionino per applicare gli stessi standard. Profisee MDM pubblica il modello di dati master in Microsoft Purview, dove può partecipare alla governance. Microsoft Purview condivide quindi l'output della governance, ad esempio un Unified Catalog e informazioni sul glossario. Profisee può esaminare l'output e applicare gli standard. Lavorando insieme, Microsoft Purview e Profisee creano una sinergia naturale e meglio unita che va più in profondità rispetto a ogni offerta indipendente.
Ad esempio, dopo aver catalogare le origini dati aziendali, è possibile determinare che i dati master sono presenti in più sistemi. I dati master sono i dati che definiscono un'entità di dominio. Esempi di dati master includono i dati relativi a cliente, prodotto, asset, posizione, fornitore, paziente, famiglia, voce di menu e ingrediente. La risoluzione di definizioni diverse e la corrispondenza e l'unione di questi dati tra sistemi è fondamentale per la possibilità di usare questi dati in modo significativo. Per essere efficace, è consigliabile unire, convalidare e correggere i dati master in Profisee MDM usando definizioni di governance, informazioni dettagliate e competenze dettagliate in Microsoft Purview. In questo modo, Microsoft Purview e Profisee MDM costituiscono una base per la governance e la gestione dei dati e ottimizzano il valore aziendale dei dati in Azure.
L'alternativa consiste nell'usare le informazioni che è possibile ottenere. Ma quando si prende questo approccio, si rischia di generare risultati fuorvianti che possono danneggiare la vostra azienda. Quando invece si usano dati master di alta qualità, si eliminano i problemi di qualità dei dati comuni. Il sistema fornisce quindi informazioni dettagliate sul suono che è possibile usare per guidare l'azienda, indipendentemente da quali strumenti si usano per l'analisi, l'apprendimento automatico e la visualizzazione. I dati master ben curati sono un aspetto chiave della creazione di una solida e affidabile base di dati.
Quando si usa Profisee MDM con Microsoft Purview, si riscontrano i vantaggi seguenti:
- Una base tecnica comune. Profisee ha avuto origine nelle tecnologie Microsoft. Profisee e Microsoft usano strumenti, database e infrastruttura comuni, che rendono la soluzione Profisee familiare a chiunque lavori con le tecnologie Microsoft. Infatti, per molti anni, Profisee MDM è stato costruito su Microsoft Master Data Services. Ora Master Data Services si sta avvicinando alla fine del ciclo di vita e Profisee è la soluzione di aggiornamento e sostituzione principale.
- Collaborazione con gli sviluppatori e sviluppo congiunto. Gli sviluppatori profisee e Microsoft Purview collaborano ampiamente per garantire una soluzione valida e complementare tra le rispettive soluzioni. Questa collaborazione offre un'integrazione senza problemi che soddisfa le esigenze dei clienti.
- Vendite e distribuzioni comuni. Profisee ha più distribuzioni MDM in Azure e in collaborazione con Microsoft Purview, rispetto a qualsiasi altro fornitore MDM. È possibile acquistare Profisee tramite Azure Marketplace. Nell'anno fiscale 2023, Profisee è l'unico fornitore MDM con una certificazione partner Microsoft di livello superiore con un'offerta di infrastruttura distribuita come servizio (IaaS), contenitori come servizio (CaaS) o software come servizio (SaaS) su Azure Marketplace.
- Distribuzione rapida e affidabile. Una funzionalità critica di tutto il software aziendale è la distribuzione rapida e affidabile. Secondo la piattaforma Gartner Peer Insights , Profisee ha più implementazioni che richiedono meno di 90 giorni per il completamento rispetto a qualsiasi altro fornitore MDM.
- Più domini. Profisee offre un approccio a MDM che usa intrinsecamente più domini. Non esistono limitazioni al numero di domini dati master che è possibile creare. Questa progettazione è perfettamente allineata ai clienti che intendono modernizzare i propri data estate. Un cliente potrebbe iniziare con un numero limitato di domini, ma alla fine trae vantaggio dall'ottimizzazione della copertura del dominio nell'intero patrimonio dati. Questa copertura di dominio viene abbinata alla copertura di governance dei dati.
- Progettazione progettata per Azure. Profisee è progettato per essere nativo del cloud con opzioni per le distribuzioni SaaS e IaaS o CaaS gestite in Azure.
Casi d'uso potenziali
Per un elenco dettagliato dei casi d'uso MDM di questa soluzione, vedere casi d'uso MDM più avanti in questo articolo. I casi d'uso principali di MDM includono gli esempi di vendita al dettaglio e produzione seguenti:
- Consolidamento dei dati dei clienti per l'analisi.
- Avere una visualizzazione a 360 gradi dei dati del prodotto in un formato coerente e accessibile, ad esempio il nome, la descrizione e le caratteristiche di ogni prodotto.
- Definizione dei dati di riferimento per aumentare in modo coerente le descrizioni dei dati master. Ad esempio, i dati di riferimento includono elenchi di paesi/aree geografiche, valute, colori, dimensioni e unità di misura.
Queste soluzioni MDM aiutano anche le organizzazioni finanziarie che si basano molto sui dati per attività critiche, ad esempio la creazione tempestiva di report.
Integrazione di MDM con Microsoft Purview
Il diagramma seguente illustra in dettaglio l'integrazione di Profisee MDM in Microsoft Purview. Per supportare questa integrazione, il sottosistema di governance Profisee fornisce l'integrazione bidirezionale con Microsoft Purview, costituita da due flussi distinti:
- La pubblicazione dei metadati della soluzione si verifica quando i modelli di dati apportano modifiche al modello di dati master, alle strategie di corrispondenza e ai relativi artefatti secondari correlati. Queste modifiche vengono pubblicate facilmente in Microsoft Purview man mano che si verificano. La pubblicazione di queste modifiche sincronizza i metadati correlati al modello di dati master e alla soluzione. Di conseguenza, Unified Catalog viene popolato ulteriormente e Microsoft Purview dispone di un record di questa origine dati critica.
- I dettagli sulla governance vengono restituiti e forniti agli amministratori dei dati e agli utenti aziendali. Questi dettagli sono disponibili quando gli utenti visualizzano i dati, arricchiscono i dati e risolvono i problemi di qualità dei dati usando il portale di Profisee FastApp.
Funzionalità di integrazione di Microsoft Purview
Il catalogo e il glossario di Microsoft Purview consentono di ottimizzare l'integrazione.
Progettazione del modello di dati master
Una delle difficoltà della preparazione di una soluzione MDM consiste nel determinare cosa costituisce i dati master e quali origini dati usare quando si popola il modello di dati master. È possibile usare Microsoft Purview per semplificare questa operazione. È possibile sfruttare la possibilità di analizzare le origini dati critiche ed è possibile coinvolgere gli amministratori dei dati e gli esperti in materia (PMI). In questo modo, è possibile arricchire Unified Catalog con informazioni a cui gli amministratori possono accedere, per allineare meglio il modello di dati master con i sistemi line-of-business. È possibile riconciliare la terminologia in conflitto. Questo processo produce un modello di dati master che riflette in modo ottimale la terminologia e le definizioni che si desidera standardizzare per l'azienda. Evita anche verbiage obsoleto e fuorviante.
L'estratto seguente del diagramma più ampio illustra questo caso d'uso dell'integrazione. In primo luogo, si usano le funzioni di analisi del sistema Microsoft Purview per inserire i metadati dai sistemi line-of-business. Successivamente, gli amministratori dei dati e le PMI preparano un catalogo e contatti solidi. I modelli di dati che lavorano con i servizi di modellazione MDM profisee possono quindi preparare ed evolvere il modello di dati master. Questo lavoro è in linea con gli standard definiti in Microsoft Purview.
Man mano che gli amministratori dei dati evolvono il modello, i servizi di modellazione all'interno della piattaforma MDM Profisee pubblicano le modifiche ricevute dai servizi di governance MDM profisee. A sua volta, Profisee MDM prepara e inoltra tali modifiche a Microsoft Purview per l'inclusione nella Unified Catalog aggiornata. Queste aggiunte al catalogo assicurano che le definizioni dei dati master siano incluse nel patrimonio dati più ampio e che possano essere gestite e controllate allo stesso modo dei metadati del sistema line-of-business. Assicurandosi che queste informazioni siano catalogate insieme, si è in una posizione migliore per gestire le relazioni tra i dati master e i dati del sistema line-of-business.
Amministrazione dei dati
Le grandi aziende che dispongono di insiemi di dati complessi ed estesi possono presentare problemi agli amministratori dei dati, responsabili della gestione e della correzione dei problemi man mano che si presentano. I domini di dati chiave possono essere complessi, con molti attributi oscuri che solo i dipendenti di ruolo che hanno conoscenze istituzionali significative capiscono. Tramite l'integrazione di Profisee MDM con Microsoft Purview, è possibile acquisire queste conoscenze istituzionali all'interno di Microsoft Purview e renderle disponibili per l'uso in Profisee MDM. Di conseguenza, si attenua una grande necessità di conoscenza dei dati aziendali quando si gestiscono informazioni critiche e sensibili al tempo.
La figura seguente illustra il flusso di informazioni da Microsoft Purview agli amministratori dei dati che lavorano nel portale di Profisee FastApp. Il servizio dati di governance si integra con Microsoft Purview e Microsoft Entra ID. Questo servizio offre funzionalità di ricerca. Gli utenti del portale di FastApp possono usare questa funzionalità per recuperare dati di governance arricchiti sulle entità e sugli attributi con cui lavorano.
I servizi di governance risolvono anche i contatti ricevuti da Microsoft Purview ai dettagli completi del profilo, disponibili in Microsoft Entra ID. Con i dettagli completi del profilo, gli amministratori possono collaborare in modo efficace con proprietari ed esperti dei dati mentre lavorano per migliorare la qualità dei dati master.
La finestra di dialogo Profisee MDM Governance è l'interfaccia attraverso la quale gli amministratori dei dati e gli utenti interagiscono con i dettagli a livello di governance. Questa interfaccia utente esegue il rendering delle informazioni ottenute da Microsoft Purview agli utenti. Usando queste informazioni, gli utenti possono esaminare i dettagli dietro i dati da cui è stata avviata la finestra di dialogo. Se le informazioni fornite nella finestra di dialogo Governance non sono sufficienti, gli utenti possono passare direttamente all'esperienza utente di Microsoft Purview.
Gli amministratori dei dati e gli utenti aziendali possono accedere a tre tipi di asset di dati MDM profisee tramite il portale di FastApp:
- Istanza di Profisee, che fornisce le proprietà dell'infrastruttura dell'istanza specifica della piattaforma MDM Profisee visualizzata dall'utente
- Entità Profisee, che fornisce le proprietà dell'entità dati master (la tabella) attualmente visualizzata dall'amministratore o dall'utente
- Attributo Profisee, che fornisce le proprietà dell'attributo (ad esempio il campo o la colonna) a cui l'utente è interessato
La figura seguente illustra dove gli utenti che lavorano nel portale di FastApp possono visualizzare i dettagli di governance per ognuno di questi tipi di asset. È possibile trovare i dettagli a livello di istanza nel menu ? . È possibile accedere ai dettagli dell'entità dall'intestazione della zona della pagina, che contiene una griglia di entità. Per informazioni dettagliate sull'attributo, passare al modulo associato alla griglia di entità. Accedere ai dettagli dalle etichette associate all'attributo .
Per visualizzare informazioni di riepilogo, passare il puntatore del mouse sull'icona di governance, ad esempio Microsoft Purview. Selezionare l'icona per visualizzare la finestra di dialogo di governance completa:
Per passare all'esperienza utente completa di Microsoft Purview, selezionare l'icona di governance nell'intestazione della finestra di dialogo. Selezionando l'icona si passa a Microsoft Purview nel contesto dell'asset che si sta visualizzando. È quindi possibile spostarsi facilmente in Microsoft Purview in base alle esigenze di individuazione.
Elaborazione MDM
La potenza di una soluzione MDM è nei dettagli.
Modellazione dei dati
Il cuore della soluzione MDM è il modello di dati sottostante. Rappresenta la definizione di dati master all'interno dell'azienda. Lo sviluppo di un modello di dati master comporta le attività seguenti:
- Identificare gli elementi dei dati di origine provenienti dal panorama dei sistemi che sono fondamentali per le operazioni dell'azienda e fondamentali per l'analisi delle prestazioni.
- Arricchire il modello con gli elementi ottenuti da altre origini di terze parti che rendono i dati più utili, accurati e affidabili.
- Stabilire una proprietà chiara e autorizzazioni correlate agli elementi del modello di dati. Questa procedura consente di garantire la visibilità del fattore e la gestione delle modifiche nella progettazione del modello.
La governance dei dati fornisce una base fondamentale per il supporto:
- I Unified Catalog di governance, il dizionario, il glossario e le risorse di supporto sono origini di informazioni preziose per gli amministratori dei dati di governance. Queste risorse consentono agli amministratori di determinare cosa includere nel modello di dati master. Consentono inoltre di determinare la proprietà e le classificazioni dei dati sensibili in Microsoft Purview. È possibile rafforzare la terminologia nel modello. Attraverso questa pratica, è possibile stabilire un lessico ufficiale per la vostra azienda. Integrando la terminologia, il modello di dati master può anche tradurre qualsiasi termine esoterico in uso in vari sistemi di origine nel linguaggio approvato dell'azienda.
- I sistemi di terze parti sono spesso un'origine di dati master separati e diversi dai sistemi line-of-business. È fondamentale aggiungere elementi al modello per acquisire le informazioni che questi sistemi aggiungono ai dati e riflettere di nuovo queste origini di informazioni in Unified Catalog.
- È possibile usare la proprietà e l'accesso ai dati, come identificato nel catalogo di governance, per applicare le autorizzazioni di accesso e di gestione delle modifiche all'interno della soluzione MDM. Di conseguenza, si allineano i criteri e le esigenze aziendali con gli strumenti usati per gestire e gestire i dati master.
Caricamento dei dati di origine
Idealmente, i diversi sistemi line-of-business caricano i dati nel modello di dati master senza modifiche o trasformazioni. L'obiettivo è avere una versione centralizzata dei dati esistente nel sistema di origine. La fedeltà tra il sistema di origine e il repository di dati master dovrebbe essere il più piccola possibile. Limitando la complessità del processo di caricamento, si semplifica la derivazione. Quando si usa una tecnologia come le pipeline di Data Factory, la soluzione di governance può controllare il flusso. La soluzione può quindi identificare le relazioni tra il sistema di origine e il modello di dati master. In particolare, la soluzione può estrarre dati dai sistemi di origine usando più di 100 connettori predefiniti e un gateway REST.
Arricchimento e standardizzazione dei dati
Dopo aver caricato i dati di origine nel modello, è possibile estenderli toccando origini avanzate di dati di terze parti. È possibile usare questi sistemi per migliorare i dati ottenuti dai sistemi line-of-business. È anche possibile usare questi sistemi per aumentare i dati di origine con informazioni che ne migliorano l'uso per altri consumer downstream. Ad esempio:
- È possibile usare servizi di verifica degli indirizzi come Bing per correggere e migliorare gli indirizzi di sistema di origine. Questi servizi possono standardizzare e aggiungere informazioni mancanti che sono cruciali per la posizione geografica e il recapito della posta.
- Servizi informativi di terze parti come Dun & Bradstreet possono fornire dati per utilizzo generico o specifici del settore. È possibile usare questi dati per estendere il valore del record master golden. In particolare, è possibile aggiungere informazioni non disponibili o in conflitto nei diversi sistemi line-of-business.
L'infrastruttura di pubblicazione/sottoscrizione di Profisee semplifica l'integrazione di origini di terze parti nella soluzione in base alle esigenze.
La capacità di comprendere le origini e il significato alla base di questi dati è fondamentale per i dati di terze parti come per i sistemi line-of-business interni. Integrando il modello di dati master nella Unified Catalog di governance, è possibile gestire le relazioni tra le origini dati interne ed esterne e arricchire il modello con i dettagli di governance.
Convalida e gestione della qualità dei dati
Dopo aver caricato e arricchito i dati, è importante verificarli per la qualità e la conformità agli standard stabiliti tramite i processi di governance. Microsoft Purview può essere di nuovo una ricca fonte di informazioni sugli standard. È possibile usare Microsoft Purview per gestire le regole di qualità dei dati applicate dalla soluzione MDM. MDM profisee può anche pubblicare regole di qualità dei dati come asset nel catalogo di governance. Le regole possono essere soggette a revisione e approvazione, che consente di fornire una supervisione dall'alto verso il basso degli standard di qualità associati ai dati master. Le regole sono associate a entità e attributi di dati master e tali attributi possono essere tracciati nel sistema di origine. Per questi motivi, è possibile stabilire la causa radice della scarsa qualità dei dati originata dai sistemi line-of-business.
Gli amministratori dei dati sono esperti nel dominio di governance. Quando gli amministratori affrontano i problemi rilevati dalla soluzione di dati master, possono usare il catalogo di governance dei dati di Microsoft Purview. Il catalogo consente agli amministratori di comprendere e risolvere i problemi di qualità man mano che si verificano. Supportati dal supporto di proprietari ed esperti dei dati, gli amministratori sono pronti ad affrontare i problemi di qualità dei dati in modo rapido e accurato.
Corrispondenza e sopravvivenza
Con i dati di origine arricchiti e di alta qualità, si è in grado di produrre un master golden record che rappresenta le informazioni più accurate tra i diversi sistemi line-of-business. La figura seguente illustra come tutti i passaggi culminano in dati di alta qualità pronti per l'uso per l'analisi aziendale. In qualsiasi momento, è possibile sincronizzare questi dati nell'intero patrimonio dati.
Il motore di corrispondenza MDM Profisee produce un master golden record come parte del processo di sopravvivenza. Le regole di sopravvivenza popolano selettivamente il record d'oro con le informazioni scelte in tutti i sistemi di origine.
Il sottosistema Profisee MDM history and audit tracking tiene traccia delle modifiche apportate dagli utenti. Questo sottosistema tiene traccia anche delle modifiche apportate ai processi di sistema, ad esempio la sopravvivenza. La corrispondenza e la sopravvivenza consentono di tracciare il flusso di informazioni dai record di origine al master. Profisee MDM ha un record del sistema di origine responsabile di un record di origine specifico. Si sa anche quanto diversi record di origine popolano il record d'oro. Di conseguenza, è possibile ottenere la derivazione dei dati dall'analisi ai dati di origine a cui fanno riferimento i report.
Casi d'uso MDM
Anche se esistono numerosi casi d'uso per MDM, alcuni casi d'uso riguardano la maggior parte delle implementazioni MDM reali. Questi casi d'uso si concentrano su un singolo dominio, ma è improbabile che vengano compilati solo da tale dominio. Anche questi casi d'uso incentrati molto probabilmente coinvolgono più domini. In ogni caso d'uso, MDM soddisfa l'obiettivo di fornire una visualizzazione unificata o a 360 gradi dei tipi di dati essenziali.
Dati del cliente
Consolidare e standardizzare i dati dei clienti per l'analisi bi è il caso d'uso più comune di MDM. Le organizzazioni acquisiscono i dati dei clienti in un numero crescente di sistemi e applicazioni. Risultato dei record dei dati dei clienti duplicati. Questi duplicati si trovano in e tra le applicazioni e contengono incoerenze e discrepanze. La scarsa qualità dei dati dei clienti limita il valore delle soluzioni di analisi moderne. I sintomi includono le sfide seguenti:
- È difficile rispondere a domande aziendali di base come "Chi sono i nostri migliori clienti?" e "Quanti nuovi clienti abbiamo?" Per rispondere a queste domande è necessario un notevole sforzo manuale.
- Sono presenti informazioni sui clienti mancanti e imprecise, il che rende difficile eseguire il rollup o il drill-down dei dati.
- Non è possibile identificare o verificare in modo univoco un cliente oltre i limiti dell'organizzazione e del sistema. Di conseguenza, non è possibile analizzare i dati dei clienti tra sistemi o business unit.
- Si dispone di informazioni dettagliate di scarsa qualità dall'intelligenza artificiale e dall'apprendimento automatico a causa dei dati di input di scarsa qualità.
Dati di prodotto
I dati di prodotto vengono spesso distribuiti in più applicazioni aziendali, ad esempio la pianificazione delle risorse aziendali (ERP), la gestione del ciclo di vita del prodotto (PLM) o le applicazioni di e-commerce. Di conseguenza, è difficile comprendere il catalogo totale dei prodotti con definizioni incoerenti per le proprietà, ad esempio il nome del prodotto, la descrizione e le caratteristiche. Definizioni diverse di dati di riferimento complicano questa situazione. I sintomi includono le sfide seguenti:
- Non è possibile supportare percorsi di rollup e drill-down gerarchici alternativi diversi per l'analisi dei prodotti.
- Con i prodotti finiti o l'inventario dei materiali, si hanno difficoltà a valutare l'inventario dei prodotti e i fornitori consolidati. Sono inoltre disponibili prodotti duplicati, che comportano un inventario in eccesso.
- È difficile razionalizzare i prodotti a causa di definizioni in conflitto. Questa situazione porta a informazioni mancanti o non accurate nell'analisi.
Dati di riferimento
Nel contesto dell'analisi, i dati di riferimento esistono come numerosi elenchi di dati. Questi elenchi vengono spesso usati per descrivere ulteriormente altri set di dati master. Ad esempio, i dati di riferimento includono elenchi di paesi/aree geografiche, valute, colori, dimensioni e unità di misura. I dati di riferimento incoerenti portano a errori evidenti nell'analisi downstream. I sintomi sono:
- Più rappresentazioni dello stesso valore. Ad esempio, lo stato della Georgia è elencato come GA e Georgia, il che rende difficile aggregare ed eseguire il drill-down dei dati in modo coerente.
- Difficoltà di snellimento dei dati tra sistemi a causa dell'impossibilità di eseguire il crosswalk o mappare i valori dei dati tra i sistemi. Ad esempio, il colore rosso è rappresentato da R nel sistema ERP e da Red nel sistema PLM.
- Difficoltà a legare i numeri tra le organizzazioni a causa delle differenze nei valori dei dati di riferimento stabiliti usati per la categorizzazione dei dati.
Dati finanziari
Le organizzazioni finanziarie si basano principalmente sui dati per attività critiche, ad esempio report mensili, trimestrali e annuali. Le organizzazioni che dispongono di più sistemi finanziari e contabili hanno spesso dati finanziari su più registri generali che devono essere consolidati per produrre report finanziari. MDM può fornire un hub centralizzato per eseguire il mapping e la gestione di account, centri di costo, entità aziendali e altri set di dati finanziari. Tramite l'hub centralizzato, MDM offre una visualizzazione consolidata di questi set di dati. I sintomi includono le sfide seguenti:
- Difficoltà nell'aggregazione dei dati finanziari tra più sistemi in una visualizzazione consolidata
- Mancanza di processo per l'aggiunta e il mapping di nuovi elementi di dati nei sistemi finanziari
- Ritardi nella produzione di report finanziari di fine periodo
Considerazioni
Queste considerazioni implementano i pilastri di Azure Well-Architected Framework, un set di principi guida che possono essere usati per migliorare la qualità di un carico di lavoro. Per altre informazioni, vedere Microsoft Azure Well-Architected Framework.
Considerare questi fattori quando si sceglie una soluzione di gestione dei dati per l'organizzazione.
Affidabilità
L'affidabilità garantisce che l'applicazione possa soddisfare gli impegni assunti con i clienti. Per altre informazioni, vedere Panoramica del pilastro dell'affidabilità.
Profisee viene eseguito in modo nativo in servizio Azure Kubernetes (servizio Azure Kubernetes) e nel database Azure SQL. Entrambi i servizi offrono funzionalità predefinite per supportare la disponibilità elevata.
Sicurezza
La sicurezza fornisce garanzie contro attacchi intenzionali e l'uso improprio di dati e sistemi preziosi. Per altre informazioni, vedere Panoramica del pilastro della sicurezza.
Profisee autentica gli utenti usando OpenID Connect, che implementa un flusso di autenticazione OAuth 2.0. La maggior parte delle organizzazioni configura Profisee MDM per autenticare gli utenti in base a Microsoft Entra ID, assicurando che sia possibile applicare e applicare i criteri aziendali per l'autenticazione.
Ottimizzazione dei costi
L'ottimizzazione dei costi consiste nell'esaminare i modi per ridurre le spese non necessarie e migliorare l'efficienza operativa. Per altre informazioni, vedere Panoramica del pilastro di ottimizzazione dei costi.
I costi di esecuzione sono costituiti da una licenza software e dall'utilizzo di Azure. Per altre informazioni, contattare Profisee.
Efficienza delle prestazioni
L'efficienza delle prestazioni è la capacità del carico di lavoro di ridimensionarsi per soddisfare le esigenze poste dagli utenti in modo efficiente. Per altre informazioni, vedere Panoramica dei pilastri dell'efficienza delle prestazioni.
Profisee MDM viene eseguito in modo nativo nel servizio Azure Kubernetes e database SQL. È possibile configurare il servizio Azure Kubernetes per ridimensionare Profisee MDM verso l'alto, verso il basso e tra le funzioni aziendali. È possibile distribuire database SQL in numerose configurazioni per bilanciare prestazioni, scalabilità e costi.
La scalabilità dinamica è intrinseca nell'architettura nativa del cloud di Profisee, che usa microservizi e contenitori. Se si esegue Profisee nel tenant cloud tramite Kubernetes, è possibile aumentare e aumentare in modo dinamico in base al carico. Con il servizio SaaS Profisee eseguito nel servizio Azure Kubernetes, è possibile configurare pool di nodi di grandi dimensioni per i pod. Questi pool vengono ridimensionati dinamicamente in base al carico sul sistema nell'infrastruttura multi-tenant.
Per informazioni dettagliate su come distribuire Profisee e Microsoft Purview nel servizio Azure Kubernetes, vedere Integrazione MDM di Microsoft Purview - Profisee.
Distribuire questo scenario
Profisee MDM è un servizio Kubernetes in pacchetto. È possibile distribuire Profisee MDM come PaaS nel tenant di Azure, in qualsiasi altro tenant cloud o in locale. È anche possibile distribuire Profisee MDM come saaS che Profisee ospita e gestisce.
Ottenere il file di licenza da Profisee generando un ticket di supporto in https://support.profisee.com/. L'unico prerequisito per questo passaggio è la necessità di pre-determinare l'URL risolto DNS configurato da Profisee in Azure. In altre parole, mantenere il NOME HOST DNS del servizio di bilanciamento del carico usato nella distribuzione. Sarà qualcosa di simile a "[profisee_name]. [region].cloudapp.azure.com". Ad esempio, DNSHOSTNAME="purviewprofisee.southcentralus.cloudapp.azure.com". Fornire questo DNSHOSTNAME al supporto di Profisee quando si genera il ticket di supporto e Profisee verrà ripristinato con il file di licenza. Sarà necessario fornire questo file durante i passaggi di configurazione successivi di seguito.
Creare un'identità gestita assegnata dall'utente in Azure. È necessario avere un'identità gestita creata per eseguire la distribuzione. Al termine della distribuzione, l'identità gestita può essere eliminata. In base alle scelte del modello di Arm, sono necessari alcuni o tutti i ruoli e le autorizzazioni seguenti assegnati all'identità gestita:
- Ruolo collaboratore al gruppo di risorse in cui verrà distribuito il servizio Azure Kubernetes. Può essere assegnato direttamente al gruppo di risorse OPPURE a livello di sottoscrizione e in basso.
- Ruolo Collaboratore zona DNS per la zona DNS specifica in cui verrà creata la voce O Ruolo collaboratore al gruppo di risorse della zona DNS. Questo ruolo DNS è necessario solo se si aggiorna DNS ospitato in Azure.
- Ruolo Amministratore applicazione in Microsoft Entra ID in modo da poter assegnare le autorizzazioni necessarie per la registrazione dell'applicazione.
- Collaboratore identità gestita e amministratore dell'accesso utente a livello di sottoscrizione. Necessario affinché l'identità gestita del modello arm possa creare un'identità gestita specifica Key Vault che verrà usata da Profisee per eseguire il pull dei valori archiviati nel Key Vault.
Creare una registrazione dell'applicazione che fungerà da identità di accesso dopo l'installazione di Profisee. Deve far parte del Microsoft Entra ID che verrà usato per accedere a Profisee. Salvare l'ID applicazione (client) per usarlo in un secondo momento.
- Impostare l'autenticazione in modo che corrisponda alle impostazioni seguenti:
- Token ID di supporto (usati per i flussi impliciti e ibridi)
- Impostare l'URL di reindirizzamento su: https://< your-deployment-url>/profisee/auth/signin-microsoft
- L'URL di distribuzione è l'URL specificato da Profisee nel passaggio 1
- Impostare l'autenticazione in modo che corrisponda alle impostazioni seguenti:
Creare un'entità servizio che Verrà usata da Microsoft Purview per eseguire alcune azioni su se stessa durante la distribuzione profisee. Per creare un'entità servizio, creare un'applicazione come nel passaggio precedente, quindi creare un segreto dell'applicazione. Salvare l'ID oggetto per l'applicazione e il valore del segreto creato per un uso successivo.
- Assegnare a questa entità servizio (usando il nome o l'ID oggetto per individuarla) le autorizzazioni di Data Curator per la raccolta radice dell'account Microsoft Purview.
Passare a https://github.com/Profisee/kubernetes e selezionare Microsoft Purview Azure ARM.
- Il modello ARM distribuirà Profisee in un'infrastruttura del servizio Azure Kubernetes con carico bilanciato (servizio Azure Kubernetes) usando un controller di ingresso.
- Il file leggimi include i passaggi per la risoluzione dei problemi.
- Leggere attentamente tutti i passaggi e la pagina wiki per la risoluzione dei problemi.
Selezionare "Distribuisci in Azure"
- La configurazione guidata del configuratore richiederà gli input come descritto di seguito: Distribuzione del cluster del servizio Azure Kubernetes tramite il modello di Resource Manager
- Assicurarsi di assegnare esattamente lo stesso RG (gruppo di risorse) nella distribuzione in cui sono state concesse le autorizzazioni per l'identità gestita nel passaggio 1.
Al termine della distribuzione, selezionare Microsoft Purview "Vai al gruppo di risorse" e aprire il cluster del servizio Azure Kubernetes profisee.
Fasi di una distribuzione tipica di Microsoft Purview - Profisee
Nella pagina Nozioni di base selezionare l'identità gestita assegnata dall'utente creata in precedenza per distribuire le risorse.
Per la configurazione di Profisee, è possibile archiviare le informazioni in Key Vault o fornire i dettagli durante la distribuzione.
- Scegliere la versione di Profisee e fornire l'account utente amministratore e la licenza.
- Selezionare questa opzione per configurare usando Microsoft Purview.
- Per l'ID client di registrazione dell'applicazione, specificare l'ID applicazione (client) per la registrazione dell'applicazione creata in precedenza.
- Selezionare l'account Microsoft Purview.
- Aggiungere l'ID oggetto per l'entità servizio creata in precedenza.
- Aggiungere il valore per il segreto creato per l'entità servizio.
- Assegnare un nome all'applicazione Web.
Nella pagina Kubernetes è possibile scegliere una versione precedente di Kubernetes, se necessario, ma lasciare vuoto il campo per distribuire la versione più recente .
Consiglio
Nella maggior parte dei casi, lasciare vuoto il campo della versione è sufficiente, a meno che non sia necessario distribuire in modo specifico usando una versione precedente del servizio Azure Kubernetes.
Nella pagina di configurazione SQL è possibile scegliere di distribuire un nuovo server Azure SQL o usare un server Azure SQL esistente. Verranno forniti i dettagli di accesso e un nome di database da usare per questa distribuzione.
Nella pagina di configurazione dell'archiviazione è possibile scegliere di creare un nuovo account di archiviazione o usarne uno esistente. Se si sceglie un account esistente, è necessario specificare una chiave di accesso e il nome di una condivisione file esistente.
Nella pagina di configurazione della rete si sceglie di usare il DNS di Azure predefinito o di specificare il proprio nome host DNS.
Consiglio
Sì, usare DNS di Azure predefinito è la configurazione consigliata. Scegliendo Sì, il deployer crea automaticamente un certificato Let's Encrypt per HTTP/TLS. Se si sceglie No , è necessario specificare vari parametri di configurazione di rete e il proprio certificato HTTPS/TLS.
Avviso
L'URL DNS di Azure predefinito (ad esempio URL="https://purviewprofisee.southcentralus.cloudapp.azure.com/profisee") verrà prelevato dalla distribuzione guidata del modello arm dal file di licenza fornito da Profisee. Se si intende apportare modifiche e non usare il DNS di Azure predefinito, assicurarsi di comunicare il DNS completo e l'URL completo del DNS Profisee al team di supporto di Profisee in modo che possano generare nuovamente e fornire il file di licenza aggiornato. In caso contrario, si verificherà un malfunzionamento dell'installazione di Profisee.
Nella pagina rivedi e crea esaminare i dettagli per assicurarsi che siano corretti mentre la procedura guidata convalida la configurazione. Al termine della convalida, selezionare Crea.
La distribuzione richiederà circa 45-50 minuti per completare l'installazione di Profisee. Durante la distribuzione verranno visualizzati gli aspetti in corso e sarà possibile aggiornare la pagina per esaminare lo stato di avanzamento. La distribuzione verrà visualizzata come completata al termine di tutto. Il completamento della fase "InstallProfiseePlatform" indica anche che la distribuzione è completata.
Al termine della distribuzione, aprire il gruppo di risorse in cui è stata distribuita l'integrazione.
In Output recuperare l'URL di distribuzione finale. Il WEBURL finale è quello che è necessario incollare sulla barra degli indirizzi del browser e iniziare a godere Profisee-Purview'integrazione! Questo URL sarà lo stesso fornito al supporto di Profisee durante l'ottenimento del file di licenza. A meno che non si sia scelto di modificare il formato dell'URL, sarà simile a "https://[profisee_name]. [region].cloudapp.azure.com/profisee/
Popolare e idratare i dati nell'ambiente Profisee appena installato installando FastApp. Passare all'URL di distribuzione Profisee e selezionare /Profisee/api/client. Dovrebbe essere simile a " https://[profisee_name]. [region].cloudapp.azure.com/profisee/api/client". Selezionare i download per l'utilità "Profisee FastApp Studio" e "Profisee Platform Tools". Installare entrambi questi strumenti nel computer client locale.
Accedere a FastApp Studio ed eseguire il resto dell'amministrazione MDM e della gestione della configurazione per Profisee. Dopo aver eseguito l'accesso con l'indirizzo di posta elettronica dell'amministratore specificato durante l'installazione; dovrebbe essere possibile visualizzare il menu di amministrazione nel riquadro sinistro di Profisee FastApp Studio. Passare a questi menu ed eseguire il resto del percorso MDM usando lo strumento FastApp. La possibilità di visualizzare il menu di amministrazione come illustrato nell'immagine seguente conferma la corretta installazione di Profisee nella piattaforma Azure.
Come passaggio di convalida finale per garantire la corretta installazione e per verificare se Profisee è stato connesso correttamente all'istanza di Microsoft Purview, passare a /Profisee/api/governance/health Dovrebbe essere simile a " https://[profisee_name]. [region].cloudapp.azure.com//Profisee/api/governance/health". La risposta di output indicherà le parole "Status": "Healthy" in tutti i sottosistemi di Microsoft Purview.
{
"OverallStatus": "Healthy",
"TotalCheckDuration": "0:XXXXXXX",
"DependencyHealthChecks": {
"purview_service_health_check": {
"Status": "Healthy",
"Duration": "00:00:NNNN",
"Description": "Successfully connected to Purview."
},
"governance_service_health_check": {
"Status": "Healthy",
"Duration": "00:00:NNNN",
"Description": "Purview cache loaded successfully.
Total assets: NNN; Instances: 1; Entities: NNN; Attributes: NNN; Relationships: NNN; Hierarchies: NNN"
},
"messaging_db_health_check": {
"Status": "Healthy",
"Duration": "00:00:NNNN",
"Description": null
},
"logging_db_health_check": {
"Status": "Healthy",
"Duration": "00:00:NNNN",
"Description": null
}
}
}
Una risposta di output simile alla precedente conferma che l'installazione è riuscita, completa tutti i passaggi di distribuzione; e verifica se Profisee è stato connesso correttamente a Microsoft Purview e indica che i due sistemi sono in grado di comunicare correttamente.
Passaggi successivi
- Informazioni sulle funzionalità del connettore di copia REST in Data Factory.
- Altre informazioni su Profisee in esecuzione in modo nativo in Azure.
- Informazioni su come distribuire Profisee in Azure usando un modello di Azure Resource Manager (modello arm).How to deploy Profisee to Azure by using an Azure Resource Manager template (ARM template).
- Visualizzare i modelli di Profisee Data Factory.