Mercado de dados
Os mercados de dados têm uma forte relação com metadados. Um mercado de dados oferece aos consumidores de dados uma experiência de compra de dados intuitiva, segura, centralizada e padronizada. Ele aproxima os dados dos analistas de dados e cientistas utilizando os metadados subjacentes. Ele também rastreia todos os seus produtos de dados, que geralmente são armazenados em uma variedade de domínios de dados.
Para democratizar os dados por meio de sua arquitetura de malha de dados, concentre-se em várias áreas importantes:
Data Product Experience Plane: Permite que provedores de dados e consumidores de dados trabalhem juntos sobre quais dados podem ser disponibilizados. As interfaces devem fornecer amplas capacidades de pesquisa que permitam aos utilizadores pesquisar utilizando palavras-chave, termos comerciais e linguagem natural. A colaboração na democratização de dados geralmente está vinculada a catálogos de dados ou serviços de gerenciamento de metadados totalmente gerenciados que permitem a pesquisa e a descoberta de metadados. Microsoft Purview é uma abordagem comprovada para ter um portal de colaboração de autoatendimento. Ele suporta a descoberta de dados , incluindo glossários e classificações . A descoberta de dados permite que seus consumidores de dados encontrem dados facilmente. O Microsoft Purview também oferece suporte a políticas de acesso de proprietário de dados para que o utilizador possa fornecer acesso a dados de auto-serviço.
Plano de infraestrutura de dados (utilitário): Ajuda a automatizar a implantação e o provisionamento de padrões de consumo comuns e reutilizáveis. Os padrões de consumo podem incluir contas de armazenamento, bancos de dados, computação, gerenciamento de identidades e assim por diante. As práticas recomendadas para permitir que seus usuários configurem e iniciem seus próprios serviços de dados podem ser encontradas em Organizar membros da equipe de operações de dados para análises em escala de nuvem no Azure, Serviços de implantação e gerenciamentoe Serviços de desenvolvimento.
Plano de Experiência de Malha de Dados: Ajuda você a manter o status de integridade de todas as interfaces, pipelines de dados contratos de dados, componentes provisionados, ferramentas centrais e assim por diante. Azure Monitor ajuda você a maximizar a disponibilidade e o desempenho de seus aplicativos e serviços e a obter monitoramento e insights. Para observabilidade de dados, crie um guarda-chuva sobre seu portal de colaboração de autoatendimento e outros serviços de metadados. Considere projetar seu próprio de metadata lake usando serviços como do Azure Cosmos DB e de Hubs de Eventos do Azure.
Um mercado de dados é tipicamente uma fina camada de orquestração com uma aparência atraente, que oferece experiências únicas ao usuário. Os mercados de dados utilizam repositórios de metadados subjacentes, que podem ser uma mistura de lojas de de metadados de
Construir um mercado de dados envolve estrutura, cultura e pessoas. Isso exige que você confie nos usuários, treine as pessoas e trabalhe na conscientização. Não subestime essas atividades. Seus usuários são recursos valiosos; eles possuem ou usam partes específicas do cenário de dados. Fazer melhor uso de seus usuários aumenta a eficiência de seu conhecimento e uso de dados.
Em alguns casos, você pode precisar de um mercado de dados externo. Os mercados de dados externos permitem a partilha dos seus produtos de dados com parceiros externos. Você pode usar Compartilhamento de Dados do Azure como um componente.
Próximos passos
Gerenciamento de dados mestre emde malha de dados.