Integração do Microsoft Purview e Profisee para gestão de dados master (MDM)

Os sistemas empresariais podem ter múltiplas origens de dados master – os dados comuns que são partilhados entre sistemas. Este facto pode tornar-se evidente quando cataloga origens de dados. Exemplos de master dados incluem dados de cliente, produto, localização, ativo e fornecedor. Quando utiliza o Profisee para intercalar, validar e corrigir os seus dados de master, pode tornar esses dados eficazes. Especificamente, pode utilizá-la para criar uma plataforma fidedigna comum para análise e melhoria operacional. Ao utilizar as definições de governação, as informações e os conhecimentos detalhados no Microsoft Purview, pode criar a sua plataforma de forma eficaz.

Esta arquitetura de referência apresenta uma solução de gestão de dados e governação que inclui o Microsoft Purview e a plataforma Profisee master gestão de dados (MDM). Estes serviços trabalham em conjunto para fornecer uma base de dados fidedignos de alta qualidade que maximizam o valor comercial dos dados no Azure. Para obter um breve vídeo sobre esta solução, veja The power of fully integrated master data management in Azure (O poder da gestão de dados master totalmente integrada no Azure).

Arquitetura

O diagrama seguinte mostra os passos que efetua quando desenvolve e opera a sua solução de dados master. Considere estes passos altamente iterativos. À medida que a sua solução evolui, pode repetir estes passos e fases, por vezes de forma automática e por vezes manual. A utilização de passos automáticos ou manuais depende das alterações que o seu master solução de dados, metadados e dados.

Fluxo de dados

Os metadados e o fluxo de dados incluem estes passos, que são apresentados na figura anterior:

1. Os conectores pré-criados do Microsoft Purview são utilizados para criar um Catálogo unificado a partir de aplicações empresariais de origem. Os conectores analisam origens de dados e povoam Catálogo unificado.

2. O modelo de dados master é publicado no Microsoft Purview. As entidades de dados principais criadas no Profisee MDM são publicadas de forma totalmente integrada no Microsoft Purview. Este passo preenche ainda mais a Catálogo unificado e garante que existe um registo desta origem de dados crítica no Microsoft Purview.

3. As normas de governação e as políticas de gestão de dados são utilizadas para enriquecer master definições de entidades de dados. Os dados são melhorados no Microsoft Purview com o dicionário de dados e informações do glossário, dados de propriedade e classificações de dados confidenciais. Quaisquer definições e metadados disponíveis no Microsoft Purview são visíveis em tempo real no Profisee como orientação para os responsáveis pelos dados mdm.

4. Os dados principais dos sistemas de origem são carregados para a MDM do Profisee. Um conjunto de ferramentas de integração de dados, como Azure Data Factory, extrai dados dos sistemas de origem com um dos mais de 100 conectores pré-criados ou um gateway REST. Vários fluxos de master dados são carregados para a MDM do Profisee.

5. Os dados master são padronizados, correspondidos, intercalados, enriquecidos e validados de acordo com as regras de governação. Outros sistemas, como o Microsoft Purview, podem definir regras de qualidade e governação de dados. Mas o Profisee MDM é o sistema que impõe estas regras. Os registos de origem são correspondidos e intercalados dentro e entre sistemas de origem para criar o registo mais completo e correto possível. As regras de qualidade de dados marcar cada registo para conformidade com os requisitos técnicos e empresariais. Qualquer registo que falhe na validação ou que devolva uma classificação de probabilidade baixa está sujeito a remediação. Para remediar validações falhadas, um processo de fluxo de trabalho atribui registos que requerem revisão aos responsáveis pelos dados que são especialistas no respetivo domínio de dados de negócio. Depois de um registo ter sido verificado ou corrigido, está pronto para ser utilizado como um registo dourado master.

6. Os dados transacionais são carregados para uma solução de análise a jusante. Um conjunto de ferramentas de integração de dados, como o Data Factory, extrai dados transacionais de sistemas de origem com um dos mais de 100 conectores pré-criados ou um gateway REST. O conjunto de ferramentas carrega os dados diretamente para uma plataforma de dados de análise, como o Azure Synapse Analytics. A análise destas informações não processadas sem os dados dourados master adequados está sujeita a imprecisão, uma vez que as sobreposições de dados, as incompatibilidades e os conflitos ainda não estão resolvidos.

7. Os conectores do Power BI fornecem acesso direto aos dados de master organizados. Os utilizadores do Power BI podem utilizar os dados master diretamente nos relatórios. Um conector dedicado do Power BI reconhece e impõe a segurança baseada em funções. Também oculta vários campos do sistema para simplificar a utilização.

8. Os dados master organizados de alta qualidade são publicados numa solução de análise a jusante. Se master registos de dados tiverem sido intercalados num único registo dourado, as ligações principal-subordinado aos registos originais são preservadas.

9. A plataforma de análise tem um conjunto de dados certificados no sentido de que são completos, consistentes e precisos. Esses dados incluem dados de master devidamente organizados e dados transacionais associados. Essa combinação constitui uma base sólida de dados fidedignos que estão disponíveis para análise adicional.

10. Os dados de master de alta qualidade são visualizados e analisados e os modelos de machine learning são aplicados. O sistema fornece informações sólidas para impulsionar a empresa.

Componentes

• O Microsoft Purview é uma solução de governação de dados que fornece uma ampla visibilidade sobre os patrimónios de dados no local e na cloud. O Microsoft Purview oferece uma combinação de deteção e classificação de dados, linhagem, pesquisa e deteção de metadados e informações de utilização. Todas estas funcionalidades ajudam-no a gerir e compreender os dados no panorama dos dados empresariais.

• O Profisee MDM é uma plataforma MDM rápida e intuitiva que se integra perfeitamente com as tecnologias da Microsoft e o ecossistema de gestão de dados do Azure.

• O Data Factory é um serviço de integração de dados híbrido. Pode utilizar o Data Factory para criar, agendar e orquestrar fluxos de trabalho de extração, transformação e carregamento (ETL) e extrair, carregar e transformar fluxos de trabalho (ELT). O Data Factory também oferece mais de 100 conectores pré-criados e um gateway REST que pode utilizar para extrair dados de sistemas de origem.

• Azure Synapse Analytics é um armazém de dados na cloud rápido, flexível e fidedigno que utiliza uma arquitetura de processamento paralelo em massa. Pode utilizar o Azure Synapse Analytics para dimensionar, calcular e armazenar dados de forma elástica e independente.

• O Power BI é um conjunto de ferramentas de análise de negócios que fornece informações em toda a sua organização. Pode utilizar o Power BI para ligar a centenas de origens de dados, simplificar a preparação de dados e impulsionar análises improvisadas. Também pode produzir relatórios apelativos e, em seguida, publicá-los para que a sua organização consuma na Web e em dispositivos móveis.

Alternativas

Se não tiver uma aplicação MDM dedicada, pode encontrar algumas das capacidades técnicas necessárias para criar uma solução de MDM no Azure:

• Qualidade dos dados. Quando carrega dados para uma plataforma de análise, pode criar qualidade de dados em processos de integração. Por exemplo, pode utilizar scripts hard-coded para aplicar transformações de qualidade de dados num pipeline do Data Factory .
• Uniformização e melhoramento de dados. Azure Mapas pode fornecer verificação de dados e uniformização para dados de endereços. Pode utilizar os dados padronizados no Azure Functions e no Data Factory. Para uniformizar outros dados, poderá ter de desenvolver scripts hard-coded.
• Duplicar a gestão de dados. Pode utilizar o Data Factory para eliminar duplicados de linhas se estiverem disponíveis identificadores suficientes para uma correspondência exata. É provável que precise de scripts hard-coded personalizados para implementar a lógica necessária para intercalar linhas correspondentes ao aplicar técnicas de sobrevivência de dados adequadas.
• Gestão de dados. Pode utilizar o Power Apps para desenvolver rapidamente soluções básicas de gestão de dados para gerir dados no Azure. Também pode desenvolver interfaces de utilizador adequadas para revisões, fluxos de trabalho, alertas e validações.

Em ambientes centrados na Microsoft, o Azure Synapse Analytics é preferido como um serviço de análise. No entanto, pode utilizar qualquer base de dados de análise. Snowflake e Databricks são escolhas comuns.

Dados do cenário

À medida que a quantidade de dados que carrega para o Azure aumenta, a necessidade de governar e gerir corretamente esses dados em todas as suas origens de dados e os consumidores de dados aumentam. Os dados que parecem adequados no sistema de origem são frequentemente considerados deficientes quando são partilhados. Pode ter informações em falta ou incompletas ou duplicações e conflitos. A sua qualidade geral pode ser fraca. O que é necessário são dados completos, consistentes e precisos.

Sem dados de alta qualidade no seu património de dados do Azure, o valor comercial do Azure é minado, talvez de forma crítica. A solução é criar uma base para a governação e gestão de dados que possa produzir e fornecer uma fonte de verdade para dados de alta qualidade e fidedignos. O Microsoft Purview e o Profisee MDM trabalham em conjunto para formar esta plataforma empresarial.

O Microsoft Purview cataloga todas as suas origens de dados e identifica quaisquer informações confidenciais e linhagem. Dá ao arquiteto de dados um local para considerar as normas de dados adequadas a impor a todos os dados. O Microsoft Purview concentra-se na governação para localizar, classificar e definir políticas e normas. As tarefas de imposição de políticas e normas, catalogação de origens de dados e remediação de dados deficientes enquadram-se em tecnologias como os sistemas MDM.

O Profisee MDM foi concebido para aceitar master dados de qualquer origem. Profisee MDM e, em seguida, corresponde, intercala, uniformiza, verifica, corrige e sincroniza os dados entre sistemas. Este processo garante que os dados podem ser devidamente integrados e que satisfazem as necessidades dos sistemas a jusante, como business intelligence (BI) e aplicações de machine learning. A plataforma profisee integrativa impõe padrões de governação em vários silos de dados.

Melhor junto

O Microsoft Purview e o Profisee MDM funcionam melhor em conjunto. Quando integrados, simplificam as tarefas de gestão de dados e garantem que todos os sistemas funcionam para impor as mesmas normas. A Profisee MDM publica o respetivo modelo de dados master no Microsoft Purview, onde pode participar na governação. Em seguida, o Microsoft Purview partilha a saída da governação, como uma Catálogo unificado e informações do glossário. Profisee pode rever a saída e impor normas. Ao trabalhar em conjunto, o Microsoft Purview e a Profisee criam uma sinergia natural e melhor em conjunto que vai mais fundo do que cada oferta independente.

Por exemplo, depois de catalogar origens de dados empresariais, poderá determinar que master dados estão presentes em vários sistemas. Os dados principais são os dados que definem uma entidade de domínio. Exemplos de master dados incluem dados de cliente, produto, ativo, localização, fornecedor, paciente, agregado familiar, item de menu e dados de ingredientes. A resolução de definições diferentes e a correspondência e intercalação destes dados entre sistemas é fundamental para a capacidade de utilizar estes dados de uma forma significativa. Para ser eficaz, deve intercalar, validar e corrigir master dados no Profisee MDM através de definições de governação, informações e conhecimentos detalhados no Microsoft Purview. Desta forma, o Microsoft Purview e o Profisee MDM formam uma base para a gestão de dados e governação e maximizam o valor comercial dos dados no Azure.

A alternativa é utilizar qualquer informação que possa obter. No entanto, quando toma esta abordagem, arrisca-se a gerar resultados enganadores que podem prejudicar a sua empresa. Quando, em vez disso, utiliza dados master de alta qualidade, elimina problemas comuns de qualidade de dados. Em seguida, o seu sistema fornece informações sólidas que pode utilizar para impulsionar a sua empresa, independentemente das ferramentas que utiliza para análise, machine learning e visualização. Os dados de master bem organizados são um aspeto fundamental da criação de uma base de dados sólida e fiável.

Quando utiliza o Profisee MDM com o Microsoft Purview, tem os seguintes benefícios:

• Uma base técnica comum. O Profisee teve origem nas tecnologias da Microsoft. A Profisee e a Microsoft utilizam ferramentas, bases de dados e infraestruturas comuns, o que torna a solução Profisee familiar a qualquer pessoa que trabalhe com tecnologias da Microsoft. Na verdade, durante muitos anos, o Profisee MDM foi criado com base no Microsoft Master Data Services. Agora Master Data Services está prestes a terminar o ciclo de vida, e a Profisee é a solução de substituição e atualização premier.
• Colaboração para programadores e desenvolvimento conjunto. Os programadores do Profisee e do Microsoft Purview colaboram extensivamente para garantir um bom ajuste complementar entre as respetivas soluções. Esta colaboração proporciona uma integração totalmente integrada que satisfaz as necessidades dos clientes.
• Vendas e implementações conjuntas. O Profisee tem mais implementações de MDM no Azure e em conjunto com o Microsoft Purview do que qualquer outro fornecedor de MDM. Pode comprar o Profisee através de Azure Marketplace. No ano fiscal de 2023, o Profisee é o único fornecedor de MDM com uma certificação de parceiro de topo da Microsoft que tem uma oferta de infraestrutura como serviço (IaaS), contentores como um serviço (CaaS) ou software como serviço (SaaS) na Azure Marketplace.
• Implementação rápida e fiável. Uma funcionalidade crítica de todo o software empresarial é a implementação rápida e fiável. De acordo com a plataforma Gartner Peer Insights , a Profisee tem mais implementações que demoram menos de 90 dias a concluir do que qualquer outro fornecedor de MDM.
• Vários domínios. A Profisee oferece uma abordagem à MDM que utiliza inerentemente vários domínios. Não existem limitações ao número de domínios de dados master que pode criar. Este design alinha-se bem com os clientes que planeiam modernizar os respetivos patrimónios de dados. Um cliente pode começar com um número limitado de domínios, mas, em última análise, beneficia de maximizar a cobertura do domínio em todo o seu património de dados. Esta cobertura de domínio corresponde à cobertura de governação de dados.
• Engenharia concebida para o Azure. O Profisee foi concebido para ser nativo da cloud com opções para SaaS e implementações IaaS ou CaaS geridas no Azure.

Potenciais casos de utilização

Para obter uma lista detalhada dos casos de utilização de MDM desta solução, veja Casos de utilização de MDM mais adiante neste artigo. Os principais casos de utilização de MDM incluem os seguintes exemplos de revenda e fabrico:

• Consolidar os dados dos clientes para análise.
• Ter uma vista de 360 graus dos dados do produto de uma forma consistente e acessível, como o nome, descrição e características de cada produto.
• Estabelecer dados de referência para aumentar consistentemente descrições de master dados. Por exemplo, os dados de referência incluem listas de países/regiões, moedas, cores, tamanhos e unidades de medida.

Estas soluções de MDM também ajudam as organizações financeiras que dependem fortemente de dados para atividades críticas, como relatórios oportunos.

Integração de MDM com o Microsoft Purview

O diagrama seguinte ilustra detalhadamente a integração do Profisee MDM no Microsoft Purview. Para suportar esta integração, o subsistema de governação Profisee fornece integração bidirecional com o Microsoft Purview, que consiste em dois fluxos distintos:

• A publicação de metadados de solução ocorre quando os modeladores de dados efetuam alterações ao modelo de dados master, às estratégias correspondentes e aos respetivos subartifactos relacionados. Estas alterações são publicadas de forma totalmente integrada no Microsoft Purview à medida que ocorrem. A publicação destas alterações sincroniza os metadados relacionados com a solução e o modelo de dados master. Como resultado, Catálogo unificado está ainda mais preenchida e o Microsoft Purview tem um registo desta origem de dados crítica.
• Os detalhes de governação são devolvidos e fornecidos aos responsáveis pelos dados e utilizadores empresariais. Estes detalhes estão disponíveis à medida que os utilizadores veem dados, enriquecem dados e remediam problemas de qualidade dos dados através do portal do Profisee FastApp.

Capacidades de integração do Microsoft Purview

O glossário e o catálogo do Microsoft Purview podem ajudá-lo a maximizar a integração.

Estrutura do modelo de dados principal

Um dos desafios da preparação de uma solução mdm é determinar o que constitui master dados e quais as origens de dados a utilizar quando povoa o modelo de dados master. Pode utilizar o Microsoft Purview para ajudar neste esforço. Pode tirar partido da capacidade de analisar as suas origens de dados críticas e pode envolver os responsáveis pelos dados e especialistas em assuntos (SMEs). Desta forma, pode enriquecer Catálogo unificado com informações às quais os administradores podem aceder, para alinhar melhor o modelo de dados master com os seus sistemas de linha de negócio. Pode reconciliar a terminologia em conflito. Este processo gera um modelo de dados master que reflete de forma ideal a terminologia e as definições que pretende uniformizar para a sua empresa. Também evita verbiage desatualizada e enganosa.

O seguinte excerto do diagrama mais amplo ilustra este caso de utilização da integração. Em primeiro lugar, utilize as funções de análise do sistema do Microsoft Purview para ingerir metadados dos seus sistemas de linha de negócio. Em seguida, os administradores de dados e os SMEs preparam um catálogo e contactos sólidos. Em seguida, os modeladores de dados que trabalham com os serviços de modelação MDM profisee podem preparar e desenvolver o seu modelo de dados master. Este trabalho está alinhado com as normas que define no Microsoft Purview.

À medida que os administradores de dados evoluem o modelo, os serviços de modelação na plataforma Profisee MDM publicam alterações que os serviços de governação de MDM do Profisee recebem. Por sua vez, o Profisee MDM prepara e reencaminha essas alterações para o Microsoft Purview para inclusão no respetivo Catálogo unificado atualizado. Estas adições ao catálogo garantem que as definições de dados master estão incluídas no património de dados mais amplo e que podem ser regidas e controladas da mesma forma que os metadados do sistema de linha de negócio. Ao garantir que estas informações estão catalogadas em conjunto, está numa melhor posição para gerir as relações entre os seus dados de master e os dados do sistema de linha de negócio.

Administração de dados

As grandes empresas que têm propriedades de dados relativamente complexas e expansivas podem apresentar desafios aos responsáveis pelos dados, responsáveis pela gestão e remediação de problemas à medida que surgem. Os principais domínios de dados podem ser complexos, com muitos atributos obscuros que apenas os colaboradores titulares que têm conhecimentos institucionais significativos compreendem. Através da integração do Profisee MDM com o Microsoft Purview, pode capturar este conhecimento institucional no Microsoft Purview e disponibilizá-lo para utilização no Profisee MDM. Como resultado, alivia uma grande necessidade de conhecimentos de dados empresariais quando gere informações críticas e sensíveis ao tempo.

A figura seguinte ilustra o fluxo de informações do Microsoft Purview para os responsáveis pelos dados que trabalham no portal do Profisee FastApp. O serviço de dados de governação integra-se com o Microsoft Purview e Microsoft Entra ID. Este serviço fornece funcionalidades de pesquisa. Os utilizadores do portal do FastApp podem utilizar esta funcionalidade para obter dados de governação melhorados sobre as entidades e os atributos com os quais trabalham.

Os serviços de governação também resolve contactos recebidos do Microsoft Purview para os detalhes completos do perfil, que estão disponíveis no Microsoft Entra ID. Com detalhes completos do perfil, os responsáveis podem colaborar eficazmente com os proprietários e especialistas de dados à medida que trabalham para melhorar a qualidade dos seus dados master.

A caixa de diálogo Profisee MDM Governance (Profisee MDM Governance) é a interface através da qual os responsáveis pelos dados e os utilizadores interagem com os detalhes ao nível da governação. Esta IU compõe as informações obtidas do Microsoft Purview para os utilizadores. Ao utilizar estas informações, os utilizadores podem rever os detalhes subjacentes aos dados a partir dos quais a caixa de diálogo foi iniciada. Se as informações fornecidas na caixa de diálogo Governação forem insuficientes, os utilizadores podem aceder diretamente à experiência de utilizador do Microsoft Purview.

Os responsáveis pelos dados e os utilizadores empresariais podem aceder a três tipos de recursos de dados MDM do Profisee através do portal fastApp:

• Profisee Instance, que fornece as propriedades de infraestrutura da instância específica da plataforma DE MDM Profisee que o utilizador está a ver
• Entidade Profisee, que fornece as propriedades da entidade de dados master (a tabela) que o administrador ou utilizador está atualmente a ver
• Atributo Profisee, que fornece as propriedades do atributo (como o campo ou coluna) no qual o utilizador está interessado

A figura seguinte ilustra onde os utilizadores que estão a trabalhar no portal do FastApp podem ver os detalhes de governação de cada um destes tipos de recursos. Pode encontrar detalhes ao nível da instância no menu Ajuda . Pode aceder aos detalhes da entidade a partir do cabeçalho da zona de página, que contém uma grelha de entidades. Para obter detalhes do atributo, aceda ao formulário associado à grelha de entidades. Aceda aos detalhes das etiquetas associadas ao atributo .

Para ver informações de resumo, paire o cursor sobre o ícone de governação, como o Microsoft Purview. Selecione o ícone para apresentar a caixa de diálogo de governação completa:

Para aceder à experiência de utilizador completa do Microsoft Purview, selecione o ícone de governação no cabeçalho da caixa de diálogo. Selecionar o ícone direciona-o para o Microsoft Purview no contexto do recurso que está atualmente a ver. Em seguida, pode mover-se facilmente no Microsoft Purview com base nas suas necessidades de deteção.

Processamento mdm

O poder de uma solução mdm está nos detalhes.

Modelação de dados

O cerne da sua solução de MDM é o modelo de dados subjacente. Representa a definição de master dados na sua empresa. Desenvolver um modelo de dados master envolve as seguintes tarefas:

• Identifique elementos de dados de origem de todos os sistemas que são fundamentais para as operações da sua empresa e centrais para analisar o desempenho.
• Melhore o modelo com os elementos que obtém de outras origens de terceiros que tornam os dados mais úteis, precisos e fidedignos.
• Estabeleça uma propriedade clara e permissões relacionadas com os elementos do modelo de dados. Esta prática ajuda a garantir que tem em consideração a visibilidade e a gestão de alterações na estrutura do modelo.

A governação de dados fornece uma base crítica de suporte:

• As suas Catálogo unificado de governação, dicionário, glossário e recursos de suporte são origens de informações inestimáveis para os administradores de dados de governação. Estes recursos ajudam os responsáveis a determinar o que incluir no modelo de dados master. Também ajudam a determinar a propriedade e as classificações de dados confidenciais no Microsoft Purview. Pode reforçar a terminologia no seu modelo. Através desta prática, pode estabelecer um léxico oficial para a sua empresa. Ao integrar a terminologia, a sua master modelo de dados também pode traduzir quaisquer termos esotéricos que estejam a ser utilizados em vários sistemas de origem para a linguagem aprovada da empresa.
• Os sistemas de terceiros são frequentemente uma origem de master dados separados e separados dos seus sistemas de linha de negócio. É fundamental adicionar elementos ao seu modelo para capturar as informações que estes sistemas adicionam aos seus dados e refletir estas origens de informações novamente no Catálogo unificado.
• Pode utilizar a propriedade e o acesso a dados, conforme identificado no seu catálogo de governação, para impor permissões de gestão de acessos e alterações na sua solução de MDM. Como resultado, alinha as suas políticas e necessidades empresariais com as ferramentas que utiliza para gerir e gerir os seus dados master.

Carregamento de dados de origem

Idealmente, os seus diferentes sistemas de linha de negócio carregam dados para a sua master modelo de dados com pouca ou nenhuma alteração ou transformação. O objetivo é ter uma versão centralizada dos dados tal como existe no sistema de origem. Deve haver o mínimo de perda de fidelidade possível entre o sistema de origem e o seu master repositório de dados. Ao limitar a complexidade do seu processo de carregamento, simplifica a linhagem. Quando utiliza tecnologia como os pipelines do Data Factory, a solução de governação pode inspecionar o fluxo. Em seguida, a sua solução pode identificar as relações entre o sistema de origem e o modelo de dados master. Especificamente, a sua solução pode extrair dados de sistemas de origem com qualquer um dos mais de 100 conectores pré-criados e um gateway REST.

Melhoramento e uniformização de dados

Depois de carregar os dados de origem para o seu modelo, pode expandi-lo ao aceder a origens avançadas de dados de terceiros. Pode utilizar estes sistemas para melhorar os dados obtidos a partir dos seus sistemas de linha de negócio. Também pode utilizar estes sistemas para aumentar os dados de origem com informações que melhoram a sua utilização para outros consumidores a jusante. Por exemplo:

• Pode utilizar serviços de verificação de endereços, como o Bing, para corrigir e melhorar os endereços do sistema de origem. Estes serviços podem uniformizar e adicionar informações em falta que são cruciais para a geolocalização e a entrega de correio.
• Serviços de informação de terceiros, como Dun & Bradstreet, podem fornecer dados para fins gerais ou específicos da indústria. Pode utilizar estes dados para expandir o valor do seu registo de master dourado. Especificamente, pode adicionar informações que não estavam disponíveis ou em conflito nos seus diferentes sistemas de linha de negócio.

A infraestrutura de publicação/subscrição da Profisee facilita a integração das suas próprias origens de terceiros na sua solução, conforme necessário.

A capacidade de compreender as origens e o significado subjacentes a estes dados é tão fundamental para os dados de terceiros como para os seus sistemas de linha de negócio internos. Ao integrar o modelo de dados master no seu Catálogo unificado de governação, pode gerir as relações entre origens de dados internas e externas, melhorando o modelo com detalhes de governação.

Validação e gestão da qualidade dos dados

Depois de carregar e enriquecer os seus dados, é importante marcar-os pela qualidade e cumprimento dos padrões que estabelece através dos seus processos de governação. O Microsoft Purview pode voltar a ser uma fonte avançada de informações de normas. Pode utilizar o Microsoft Purview para impulsionar as regras de qualidade de dados que a sua solução de MDM impõe. O Profisee MDM também pode publicar regras de qualidade de dados como recursos no seu catálogo de governação. As regras podem estar sujeitas a revisão e aprovação, o que o ajuda a fornecer uma supervisão de cima para baixo dos padrões de qualidade associados aos seus dados de master. As regras estão associadas a master entidades e atributos de dados e esses atributos podem ser rastreados até ao sistema de origem. Por estes motivos, pode estabelecer a causa principal da má qualidade dos dados provenientes dos seus sistemas de linha de negócio.

Os responsáveis pelos dados são especialistas no seu domínio de governação. À medida que os administradores abordam problemas que a sua solução de dados master revela, podem utilizar o catálogo de governação de dados do Microsoft Purview. O catálogo ajuda os responsáveis a compreender e a resolve problemas de qualidade à medida que surgem. Apoiados pelo suporte de proprietários e especialistas de dados, os responsáveis estão preparados para resolver problemas de qualidade dos dados de forma rápida e precisa.

Correspondência e sobrevivência

Com dados de origem melhorados e de alta qualidade, está posicionado para produzir um registo dourado master que representa as informações mais precisas nos seus diferentes sistemas de linha de negócio. A figura seguinte ilustra como todos os passos culminam em dados de alta qualidade prontos a utilizar para análise empresarial. Em qualquer altura, pode sincronizar estes dados no seu património de dados.

O motor de correspondência Profisee MDM produz um recorde dourado master como parte do processo de sobrevivência. As regras de sobrevivência povoam seletivamente o registo dourado com informações que escolheu em todos os seus sistemas de origem.

O subsistema de registo de auditoria e histórico de MDM do Profisee monitoriza as alterações que os utilizadores efetuam. Este subsistema também monitoriza as alterações que o sistema processa, como a sobrevivência efetuar. A correspondência e a sobrevivência permitem rastrear o fluxo de informações dos seus registos de origem para o master. Profisee MDM tem um registo do sistema de origem responsável por um registo de origem específico. Também sabe como os registos de origem diferentes povoam o registo dourado. Como resultado, pode obter a linhagem de dados da análise de volta para os dados de origem que os seus relatórios referenciam.

Casos de utilização de MDM

Embora existam inúmeros casos de utilização para MDM, alguns casos de utilização abrangem a maioria das implementações de MDM no mundo real. Estes casos de utilização concentram-se num único domínio, mas é pouco provável que sejam criados apenas a partir desse domínio. Mesmo estes casos de utilização focados envolvem provavelmente vários domínios. Em cada caso de utilização, a MDM cumpre o objetivo de fornecer uma vista unificada ou de 360 graus dos tipos de dados essenciais.

Dados do cliente

Consolidar e uniformizar os dados dos clientes para análise de BI é o caso de utilização de MDM mais comum. As organizações capturam dados de clientes num número crescente de sistemas e aplicações. Resultado dos registos de dados do cliente duplicados. Estes duplicados estão localizados em e entre aplicações e contêm inconsistências e discrepâncias. A má qualidade dos dados dos clientes limita o valor das soluções de análise modernas. Os sintomas incluem os seguintes desafios:

• É difícil responder a perguntas básicas sobre negócios como: "Quem são os nossos principais clientes?" e "Quantos novos clientes temos?" Responder a estas perguntas requer um esforço manual significativo.
• Tem informações do cliente em falta e imprecisas, o que dificulta a agregação ou desagregação dos dados.
• Não consegue identificar ou verificar exclusivamente um cliente em todos os limites organizacionais e do sistema. Como resultado, não consegue analisar os dados dos clientes em sistemas ou unidades empresariais.
• Tem informações de má qualidade da IA e machine learning devido aos dados de entrada de má qualidade.

Dados do produto

Os dados do produto são frequentemente distribuídos por várias aplicações empresariais, como o planeamento de recursos empresariais (ERP), a gestão do ciclo de vida dos produtos (PLM) ou aplicações de comércio eletrónico. Como resultado, é difícil compreender o catálogo total de produtos que têm definições inconsistentes para propriedades, como o nome do produto, a descrição e as características. Diferentes definições de dados de referência complicam esta situação. Os sintomas incluem os seguintes desafios:

• Não é possível suportar diferentes caminhos de agregação e desagregação hierárquicos alternativos para análise de produtos.
• Com os bens concluídos ou o inventário material, tem dificuldade em avaliar o inventário de produtos e os fornecedores estabelecidos. Também tem produtos duplicados, o que leva ao excesso de inventário.
• É difícil racionalizar os produtos devido a definições em conflito. Esta situação leva a informações em falta ou imprecisas na análise.

Dados de referência

No contexto da análise, os dados de referência existem como várias listas de dados. Estas listas são frequentemente utilizadas para descrever ainda mais outros conjuntos de dados master. Por exemplo, os dados de referência incluem listas de países/regiões, moedas, cores, tamanhos e unidades de medida. Os dados de referência inconsistentes originam erros óbvios na análise a jusante. Os sintomas são:

• Múltiplas representações do mesmo valor. Por exemplo, o estado da Geórgia está listado como GA e Geórgia, o que dificulta a agregação e desagregação consistente dos dados.
• Dificuldade em simplificar os dados em todos os sistemas devido à incapacidade de fazer um caminho cruzado ou mapear valores de dados de referência entre sistemas. Por exemplo, a cor vermelha é representada por R no sistema ERP e Vermelho no sistema PLM.
• Dificuldade em ligar números entre organizações devido a diferenças nos valores de dados de referência estabelecidos que são utilizados para categorização de dados.

Dados financeiros

As organizações financeiras dependem bastante de dados para atividades críticas, como relatórios mensais, trimestrais e anuais. Muitas vezes, as organizações que têm múltiplos sistemas financeiros e contabilísticos têm dados financeiros em vários livros razão gerais que precisam de ser consolidados para produzir relatórios financeiros. A MDM pode fornecer um hub centralizado para mapear e gerir contas, centros de custos, entidades empresariais e outros conjuntos de dados financeiros. Através do hub centralizado, a MDM fornece uma vista consolidada destes conjuntos de dados. Os sintomas incluem os seguintes desafios:

• Dificuldade em agregar dados financeiros em vários sistemas numa vista consolidada
• Falta de processo para adicionar e mapear novos elementos de dados em sistemas financeiros
• Atrasos na produção de relatórios financeiros de fim de período

Considerações

Estas considerações implementam os pilares do Azure Well-Architected Framework, que é um conjunto de princípios orientadores que podem ser utilizados para melhorar a qualidade de uma carga de trabalho. Para obter mais informações, veja Microsoft Azure Well-Architected Framework.

Considere estes fatores quando escolher uma solução de gestão de dados para a sua organização.

Confiabilidade

A fiabilidade garante que a sua aplicação pode cumprir os compromissos assumidos com os seus clientes. Para obter mais informações, veja Descrição geral do pilar de fiabilidade.

O Profisee é executado nativamente no Serviço de Kubernetes do Azure (AKS) e na Base de Dados SQL do Azure. Ambos os serviços oferecem capacidades de configuração inicial para suportar a elevada disponibilidade.

Segurança

A segurança fornece garantias contra ataques deliberados e abuso dos seus valiosos dados e sistemas. Para obter mais informações, veja Descrição geral do pilar de segurança.

O Profisee autentica os utilizadores com o OpenID Connect, que implementa um fluxo de autenticação OAuth 2.0. A maioria das organizações configura o Profisee MDM para autenticar os utilizadores contra Microsoft Entra ID, o que garante que pode aplicar e impor as suas políticas empresariais para autenticação.

Otimização de custos

A otimização de custos consiste em analisar formas de reduzir despesas desnecessárias e melhorar a eficiência operacional. Para obter mais informações, veja Descrição geral do pilar de otimização de custos.

Os custos de execução consistem numa licença de software e no consumo do Azure. Para obter mais informações, contacte a Profisee.

Eficiência de desempenho

A eficiência de desempenho é a capacidade da carga de trabalho de dimensionar para satisfazer as exigências que os utilizadores lhe colocam de forma eficiente. Para obter mais informações, veja Descrição geral do pilar eficiência de desempenho.

O Profisee MDM é executado nativamente no AKS e Banco de Dados SQL. Pode configurar o AKS para aumentar, reduzir e reduzir verticalmente a MDM profisee nas suas funções empresariais. Pode implementar Banco de Dados SQL em várias configurações para equilibrar o desempenho, a escalabilidade e os custos.

O dimensionamento dinâmico é inerente à arquitetura nativa da cloud do Profisee, que utiliza microsserviços e contentores. Se executar o Profisee no inquilino da cloud através do Kubernetes, pode aumentar e aumentar verticalmente de forma dinâmica com base na carga. Com o serviço Profisee SaaS que é executado no AKS, pode configurar conjuntos de nós grandes para os seus pods. Estes conjuntos são dimensionados dinamicamente com base na carga no sistema na infraestrutura multi-inquilino.

Para obter informações detalhadas sobre como implementar o Profisee e o Microsoft Purview no AKS, veja Microsoft Purview – Integração do Profisee MDM.

Implementar este cenário

O Profisee MDM é um serviço do Kubernetes empacotado. Pode implementar o Profisee MDM como paaS no inquilino do Azure, em qualquer outro inquilino da cloud ou no local. Também pode implementar o Profisee MDM como um SaaS que o Profisee aloja e gere.

1. Obtenha o ficheiro de licença da Profisee ao criar um pedido de suporte em https://support.profisee.com/. O único pré-requisito para este passo é a sua necessidade de pré-determinar o URL resolvido do DNS na configuração do Profisee no Azure. Por outras palavras, mantenha o NOME DO ANFITRIÃO DNS do balanceador de carga utilizado na implementação. Será algo como "[profisee_name]. [região].cloudapp.azure.com". Por exemplo, DNSHOSTNAME="purviewprofisee.southcentralus.cloudapp.azure.com". Forneça este DNSHOSTNAME ao suporte da Profisee quando levantar o pedido de suporte e o Profisee reverter com o ficheiro de licença. Terá de fornecer este ficheiro durante os próximos passos de configuração abaixo.

2. Criar uma identidade gerida atribuída pelo utilizador no Azure. Tem de ter uma identidade gerida criada para executar a implementação. Após a conclusão da implementação, a identidade gerida pode ser eliminada. Com base nas opções de modelo do ARM, precisará de algumas ou todas as seguintes funções e permissões atribuídas à sua identidade gerida:

   • Função de contribuidor para o grupo de recursos onde o AKS será implementado. Pode ser atribuído diretamente ao grupo de recursos OU ao nível da subscrição e ao nível inferior.
   • Função Contribuidor de Zona DNS para a zona DNS específica onde a entrada será criada OU Função contribuidor para o grupo de recursos zona DNS. Esta função DNS só é necessária se atualizar o DNS alojado no Azure.
   • A função administrador de aplicações no Microsoft Entra ID para que as permissões necessárias para o registo da aplicação possam ser atribuídas.
   • Contribuidor de Identidade Gerida e Administrador de Acesso de Utilizador ao nível da subscrição. Necessário para que a identidade gerida do modelo arm possa criar um Key Vault identidade gerida específica que será utilizada pelo Profisee para extrair os valores armazenados no Key Vault.

   

3. Crie um registo de aplicação que funcionará como a identidade de início de sessão assim que o Profisee estiver instalado. Tem de fazer parte do Microsoft Entra ID que será usado para iniciar sessão no Profisee. Guarde o ID da Aplicação (cliente) para utilizar mais tarde.

   • Defina a autenticação para corresponder às definições abaixo:
     • Tokens de ID de suporte (utilizados para fluxos implícitos e híbridos)
     • Defina o URL de redirecionamento para: https://< a sua implementação-url>/profisee/auth/signin-microsoft
       • O URL de implementação é o URL que terá fornecido profisee no passo 1

4. Crie um principal de serviço que o Microsoft Purview irá utilizar para realizar algumas ações sobre si próprio durante esta implementação do Profisee. Para criar um principal de serviço, crie uma aplicação como fez no passo anterior e, em seguida, crie um segredo da aplicação. Guarde o ID do Objeto da aplicação e o Valor do segredo que criou para utilização posterior.

   • Atribua a este principal de serviço (utilizando o nome ou o ID do Objeto para localizá-lo) permissões de Curador de Dados na coleção de raiz da sua conta do Microsoft Purview.

5. Aceda a https://github.com/Profisee/kubernetes e selecione Microsoft Purview ARM do Azure.

   • O modelo do ARM irá implementar o Profisee numa infraestrutura do AKS com balanceamento de carga (Serviço de Kubernetes do Azure) com um controlador de entrada.
   • O readme inclui passos de resolução de problemas.
   • Leia cuidadosamente todos os passos e resolução de problemas da página wiki.

6. Selecione "Implementar no Azure"

   

   • O assistente do configurador irá pedir as entradas conforme descrito aqui – Implementar o Cluster do AKS com o Modelo do ARM
   • Certifique-se de que concede exatamente o mesmo RG (Grupo de Recursos) na implementação, uma vez que concedeu permissões para a identidade gerida no Passo1.

7. Após a conclusão da implementação, selecione Microsoft Purview "Ir para Grupo de Recursos" e abra o Cluster do Profisee AKS.

Fases de uma implementação típica do Microsoft Purview – Profisee

1. Na página noções básicas, selecione a identidade gerida atribuída pelo utilizador que criou anteriormente para implementar os recursos.

2. Para a configuração do Profisee, pode armazenar as suas informações no Key Vault ou fornecer os detalhes durante a implementação.

   1. Escolha a sua versão do Profisee e forneça a sua conta de utilizador e licença de administrador.
   2. Selecione para configurar com o Microsoft Purview.
   3. Para o ID de Cliente do Registo de Aplicações, indique o ID da aplicação (cliente) para o registo de aplicação que criou anteriormente.
   4. Selecione a sua conta do Microsoft Purview.
   5. Adicione o ID de objeto para o principal de serviço que criou anteriormente.
   6. Adicione o valor do segredo que criou para esse principal de serviço.
   7. Atribua um nome à sua aplicação Web.

   

3. Na página Kubernetes, pode escolher uma versão mais antiga do Kubernetes, se necessário, mas deixe o campo em branco para implementar a versão mais recente .

   

   Dica

   Na maioria dos casos, deixar o campo de versão em branco é suficiente, a menos que seja necessário implementar com uma versão mais antiga do Kubernetes AKS especificamente.

4. Na página configuração do SQL, pode optar por implementar um novo servidor SQL do Azure ou utilizar um servidor de SQL do Azure existente. Irá fornecer detalhes de início de sessão e um nome de base de dados a utilizar para esta implementação.

   

5. Na página de configuração do armazenamento, pode optar por criar uma nova conta de armazenamento ou utilizar uma existente. Terá de fornecer uma chave de acesso e o nome de uma partilha de ficheiros existente se escolher uma conta existente.

   

6. Na página de configuração de rede, irá optar por utilizar o DNS do Azure predefinido ou fornecer o seu próprio nome de anfitrião DNS.

   Dica

   Sim, utilizar o DNS do Azure predefinido é a configuração recomendada. Ao selecionar Sim, o implementador cria automaticamente um certificado Let's Encrypt para HTTP/TLS. Se escolher Não , terá de fornecer vários parâmetros de configuração de rede e o seu próprio certificado HTTPS/TLS.

   

   Aviso

   O URL de DNS do Azure predefinido (por exemplo, URL="https://purviewprofisee.southcentralus.cloudapp.azure.com/profisee") será recolhido pelo assistente de implementação de modelos do ARM do thr do ficheiro de licença fornecido pela Profisee. Se pretender efetuar alterações e não utilizar o DNS predefinido do Azure, certifique-se de que comunica o DNS completo e o URL completamente qualificado do DNS Profisee à equipa de suporte do Profisee para que possam voltar a gerar e fornecer-lhe o ficheiro de licença atualizado. Se não o fizer, resultará numa instalação incorreta da Profisee.

7. Na página rever + criar, reveja os seus detalhes para garantir que estão corretos enquanto o assistente valida a configuração. Assim que a validação for aprovada, selecione Criar.

   

8. A implementação demorará cerca de 45 a 50 Minutos para concluir a instalação do Profisee. Durante a implementação, verá os aspetos que estão em curso e poderá atualizar a página para rever o progresso. A implementação será apresentada como concluída quando tudo estiver concluído. A conclusão da fase "InstallProfiseePlatform" também indica que a implementação está concluída!

   

   

9. Quando a implementação estiver concluída, abra o grupo de recursos onde implementou a integração.

   

10. Em saídas, obtenha o URL de implementação final. O WEBURL final é o que precisa de colar na barra de endereço do browser e começar a desfrutar Profisee-Purview integração! Este URL será o mesmo que teria fornecido ao suporte da Profisee ao obter o ficheiro de licença. A menos que tenha optado por alterar o formato do URL, terá um aspeto semelhante a " https://[profisee_name]. [região].cloudapp.azure.com/profisee/

    

11. Preencha e hidrata os dados para o ambiente do Profisee recentemente instalado ao instalar o FastApp. Aceda ao URL de implementação do Profisee e selecione /Profisee/api/client. Deve ter um aspeto semelhante a " https://[profisee_name]. [região].cloudapp.azure.com/profisee/api/client". Selecione o utilitário Transferências para "Profisee FastApp Studio" e "Ferramentas de Plataforma Profisee". Instale estas duas ferramentas no seu computador cliente local.

    

12. Inicie sessão no FastApp Studio e execute o resto da Administração mdm e da gestão de configuração do Profisee. Depois de iniciar sessão com o endereço de e-mail do administrador fornecido durante a configuração; deverá conseguir ver o menu de administração no painel esquerdo do Profisee FastApp Studio. Navegue para estes menus e efetue o resto do seu percurso de MDM com a ferramenta FastApp. A capacidade de ver o menu de administração, conforme mostrado na imagem abaixo, confirma a instalação com êxito do Profisee na Plataforma do Azure.

    

13. Como passo de validação final para garantir uma instalação bem-sucedida e para verificar se a Profisee foi ligada com êxito à sua instância do Microsoft Purview, aceda a /Profisee/api/governance/health Deve ter um aspeto semelhante a " https://[profisee_name]. [região].cloudapp.azure.com//Profisee/api/governance/health". A resposta de saída indicará as palavras "Estado": "Bom estado de funcionamento" em todos os subsistemas do Microsoft Purview.

{
  "OverallStatus": "Healthy",
  "TotalCheckDuration": "0:XXXXXXX",
  "DependencyHealthChecks": {
    "purview_service_health_check": {
      "Status": "Healthy",
      "Duration": "00:00:NNNN",
      "Description": "Successfully connected to Purview."
    },
    "governance_service_health_check": {
      "Status": "Healthy",
      "Duration": "00:00:NNNN",
      "Description": "Purview cache loaded successfully. 
      Total assets: NNN; Instances: 1; Entities: NNN; Attributes: NNN; Relationships: NNN; Hierarchies: NNN"
    },
    "messaging_db_health_check": {
      "Status": "Healthy",
      "Duration": "00:00:NNNN",
      "Description": null
    },
    "logging_db_health_check": {
      "Status": "Healthy",
      "Duration": "00:00:NNNN",
      "Description": null
    }
  }
}

Uma resposta de saída semelhante à anterior confirma a instalação com êxito, conclui todos os passos de implementação; e valida se o Profisee foi ligado com êxito ao seu Microsoft Purview e indica que os dois sistemas conseguem comunicar corretamente.

Próximas etapas

• Compreenda as capacidades do conector de cópia REST no Data Factory.
• Saiba mais sobre a execução nativa do Profisee no Azure.
• Saiba como implementar o Profisee no Azure com um modelo de Resource Manager do Azure (modelo arm).
• Ver modelos do Profisee Data Factory.