O que é Real-Time Intelligence?
Real-Time Intelligence é um serviço poderoso que capacita todos na sua organização a extrair insights e visualizar seus dados em movimento. Ele oferece uma solução completa para cenários orientados a eventos, streaming de dados e logs de dados. Seja lidando com gigabytes ou petabytes, todos os dados organizacionais em movimento convergem no Real-Time Hub. Ele conecta perfeitamente dados baseados no tempo de várias fontes usando conectores sem código, permitindo insights visuais imediatos, análise geoespacial e reações baseadas em gatilhos que fazem parte de um catálogo de dados em toda a organização.
Depois de conectar perfeitamente qualquer fluxo de dados, toda a solução SaaS se torna acessível. A Inteligência em Tempo Real lida com a ingestão de dados, transformação, armazenamento, análises, visualização, rastreamento, IA e ações em tempo real. Seus dados permanecem protegidos, controlados e integrados em toda a organização, alinhando-se perfeitamente com todas as ofertas do Fabric. A Inteligência em Tempo Real transforma seus dados em um recurso dinâmico e acionável que gera valor em toda a organização.
A Inteligência em Tempo Real pode ajudar-me?
Real-Time Intelligence pode ser usado para análise de dados, insights visuais imediatos, centralização de dados em movimento para uma organização, ações sobre dados, consultas eficientes, transformação e armazenamento de grandes volumes de dados estruturados ou não estruturados. Se você precisa avaliar dados de sistemas IoT, logs do sistema, texto livre, dados semiestruturados ou contribuir com dados para consumo por outras pessoas em sua organização, o Real-Time Intelligence fornece uma solução versátil.
Mesmo que seja chamado de "tempo real", seus dados não precisam estar fluindo em altas taxas e volumes. A Inteligência em Tempo Real oferece soluções orientadas a eventos, em vez de agendadas. Os componentes de Inteligência em Tempo Real são criados com base em serviços essenciais confiáveis da Microsoft e, juntos, estendem os recursos gerais do Fabric para fornecer soluções orientadas a eventos.
Os aplicativos de inteligência em tempo real abrangem uma ampla variedade de cenários de negócios, como automotivo, manufatura, IoT, deteção de fraudes, gerenciamento de operações de negócios e deteção de anomalias.
Como faço para usar o Real-Time Intelligence?
Real-Time Intelligence no Microsoft Fabric oferece recursos que, em combinação, permitem a criação de soluções de Real-Time Intelligence em suporte a processos de negócios e engenharia.
O hub em tempo real serve como um catálogo centralizado dentro da sua organização. Ele facilita o fácil acesso, adição, exploração e compartilhamento de dados. Ao expandir a gama de fontes de dados, permite insights mais amplos e clareza visual em vários domínios. É importante ressaltar que esse hub garante que os dados não estejam apenas disponíveis, mas também acessíveis a todos, promovendo a tomada rápida de decisões e ações informadas. O compartilhamento de dados de streaming de diversas fontes libera o potencial de criar inteligência de negócios abrangente em toda a sua organização.
Depois de selecionar um fluxo de sua organização ou conectado a fontes externas ou internas, você pode usar as ferramentas de consumo de dados em Inteligência em Tempo Real para explorar seus dados. As ferramentas de consumo de dados usam o processo de exploração visual de dados e detalham os insights de dados. Você pode acessar dados que são novos para você e entender facilmente a estrutura de dados, padrões, anomalias, quantidades de previsão e taxas de dados. Assim, você pode agir ou tomar decisões inteligentes com base nos dados. Os painéis em tempo real vêm equipados com interações prontas para uso que simplificam o processo de compreensão de dados, tornando-os acessíveis a qualquer pessoa que queira tomar decisões com base em dados em movimento usando ferramentas visuais, Linguagem Natural e Copilot.
Esses insights podem ser transformados em ações com o Fabric Activator, à medida que você configura alertas de várias partes do Fabric para reagir a padrões ou condições de dados em tempo real.
Como interajo com os componentes da Inteligência em Tempo Real?
Descubra dados de streaming
O hub em tempo real é usado para descobrir e gerenciar seus dados de streaming. Real-Time hub events é um catálogo de dados em movimento e contém:
Fluxos de dados: todos os fluxos de dados que estão sendo executados ativamente na malha, aos quais você tem acesso.
Fontes da Microsoft: descubra facilmente as fontes de streaming que você tem e configure rapidamente a ingestão dessas fontes no Fabric, por exemplo: Hubs de Eventos do Azure, Hub IoT do Azure, Captura de Dados de Alteração (CDC) do Banco de Dados SQL do Azure, CDC do Azure Cosmos DB, CDC do PostgreSQL DB.
Eventos de malha: os recursos orientados a eventos suportam notificações em tempo real e processamento de dados. Você pode monitorar e reagir a eventos, incluindo eventos de Item de Espaço de Trabalho de Malha e eventos de Armazenamento de Blob do Azure. Esses eventos podem ser usados para disparar outras ações ou fluxos de trabalho, como invocar um pipeline de dados ou enviar uma notificação por e-mail. Também pode enviar estes eventos para outros destinos através de eventstreams.
Esses dados são todos apresentados em um formato facilmente consumível e estão disponíveis para todas as cargas de trabalho do Fabric.
Conectar-se a dados de streaming
Os fluxos de eventos são a maneira da plataforma Fabric de capturar, transformar e rotear grandes volumes de eventos em tempo real para vários destinos com uma experiência sem código. Os fluxos de eventos suportam várias fontes de dados e destinos de dados, incluindo uma ampla gama de conectores para fontes externas, por exemplo: clusters Apache Kafka, feeds de captura de dados de alteração de banco de dados, fontes de streaming da AWS (Kinesis) e Google (GCP Pub/Sub).
Processar fluxos de dados
Usando os recursos de processamento de eventos em Eventstreams, você pode fazer filtragem, limpeza de dados, transformação, agregações em janela e deteção de dupe, para colocar os dados na forma desejada. Você também pode usar os recursos de roteamento baseados em conteúdo para enviar dados para destinos diferentes com base em filtros. Outro recurso, fluxos de eventos derivados, permite construir novos fluxos como resultado de transformações e/ou agregações que podem ser compartilhadas com os consumidores no hub em tempo real.
Armazenar e analisar dados
As casas de eventos são o motor de análise ideal para processar dados em movimento. Eles são adaptados para eventos de streaming baseados no tempo com dados estruturados, semiestruturados e não estruturados. Esses dados são automaticamente indexados e particionados com base no tempo de ingestão, oferecendo recursos de consulta analítica incrivelmente rápidos e complexos em dados de alta granularidade. Os dados armazenados em eventhouses podem ser disponibilizados no OneLake para consumo por outras experiências do Fabric.
Os dados indexados e particionados armazenados em casas de eventos estão prontos para consultas extremamente rápidas usando várias opções de código, low-code ou no-code no Fabric. Os dados podem ser consultados no KQL nativo (Kusto Query Language) ou usando T-SQL no conjunto de consultas KQL. O copiloto Kusto, juntamente com a experiência de exploração de consultas sem código, simplifica o processo de análise de dados para usuários experientes do KQL e cientistas de dados cidadãos. KQL é uma linguagem simples, mas poderosa para consultar dados estruturados, semi-estruturados e não estruturados. A linguagem é expressiva, fácil de ler e entender a intenção da consulta e otimizada para experiências de criação.
Visualize insights de dados
Esses insights de dados podem ser visualizados em conjuntos de consultas KQL, painéis em tempo real e relatórios do Power BI, com segundos desde a ingestão de dados até os insights. As opções de visualização variam de sem código a experiências totalmente especializadas, dando valor ao explorador de insights iniciante e especializado para visualizar seus dados como gráficos e tabelas. Você pode usar pistas visuais para executar operações de filtragem e agregação nos resultados da consulta e usando uma lista rica de visualizações internas. Esses insights podem ser exibidos em Relatórios do Power BI e Painéis em Tempo Real, que podem ter alertas criados com base nos insights de dados.
Ações de desencadeamento
Os alertas monitorizam a alteração de dados e tomam automaticamente medidas quando são detetados padrões ou condições. Os dados podem fluir no hub em tempo real ou observados a partir de uma consulta Kusto ou relatório do Power BI. Quando determinadas condições ou lógicas são atendidas, uma ação é executada, como alertar os usuários, executar itens de trabalho do Fabric como um pipeline ou iniciar fluxos de trabalho do Power Automatic. A lógica pode ser um limite simplesmente definido, um padrão como eventos acontecendo repetidamente durante um período de tempo ou os resultados de uma lógica complexa definida por uma consulta KQL. O Activator transforma suas informações orientadas a eventos em vantagens comerciais acionáveis.
Integre com outras experiências do Fabric
- Encaminhar eventos de fluxos de eventos para destinos de itens de malha
- Emitir eventos de itens do Fabric para o hub em tempo real
- Aceda aos dados no OneLake a partir do Real-Time Intelligence de várias formas:
- Os dados do OneLake podem ser consultados a partir do Real-Time Intelligence como um atalho
- Use os dados carregados no Real-Time Intelligence como os dados subjacentes para visualização em um relatório do Power BI
- Use os dados carregados em Inteligência em Tempo Real para análise em Notebooks de Malha em Engenharia de Dados