Adicionar o Amazon Managed Streaming for Apache Kafka (MSK) como origem no hub em tempo real (demonstração)
Este artigo descreve como adicionar o Amazon Streaming for Apache Kafka (MSK) como uma fonte de eventos no hub do Fabric Real-Time.
O Amazon MSK Kafka é um serviço Kafka totalmente gerenciado que simplifica a configuração, a escalabilidade e o gerenciamento. Ao integrar o Amazon MSK Kafka como uma fonte em seu fluxo de eventos, você pode trazer facilmente os eventos em tempo real do seu MSK Kafka e processá-los antes de roteá-los para vários destinos no Fabric.
Observação
Atualmente, o hub em tempo real está em preview.
Pré-requisitos
- Obtenha acesso ao espaço de trabalho premium do Fabric com permissões de Contribuidor ou superiores.
- Um cluster do Amazon MSK Kafka em status ativo.
- Seu cluster do Amazon MSK Kafka deve ser acessível publicamente e não estar protegido por um firewall ou protegido em uma rede virtual.
Iniciar Adicionar experiência de origem
Entre no Microsoft Fabric.
Selecione Hub em Tempo Real na barra de navegação esquerda.
Na página do hub em tempo real, selecione + Adicionar fonte no canto superior direito da página.
Adicionar o Amazon Managed Streaming for Apache Kafka como origem
Na página Selecionar uma fonte de dados , selecione Amazon MSK Kafka.
Na página Conectar, selecione Nova conexão.
Na seção Configurações de conexão , para Bootstrap Server, insira o ponto de extremidade público do cluster do Kafka.
Para obter o ponto de extremidade público:
Na seção Credenciais de conexão, se você tiver uma conexão existente com o cluster do Amazon MSK Kafka, selecione-a na lista suspensa para Conexão. Caso contrário, siga estas etapas:
- Em Nome da conexão, insira um nome para a conexão.
- Em Tipo de autenticação, confirme se a chave de API está selecionada.
- Em Key and Secret (Chave e segredo), insira a chave de API e a chave Secret (Segredo) para o cluster do Amazon MSK Kafka.
Selecione Conectar.
Agora, na página Conectar, siga estas etapas.
Em Tópico, insira o tópico Kafka.
Em Grupo de consumidores, insira o grupo de consumidores do cluster do Kafka. Este campo fornece um grupo de consumidores dedicado para obter eventos.
Selecione Redefinir deslocamento automático para especificar por onde começar a ler deslocamentos se não houver confirmação.
Para Protocolo de segurança, o valor padrão é SASL_SSL. O mecanismo SASL padrão é SCRAM-SHA-512 e não pode ser alterado.
Selecione Avançar. Na tela Revisar e criar, revise o resumo e selecione Adicionar.
Exibir detalhes do fluxo de dados
Na página Revisar e criar , se você selecionar Abrir fluxo de eventos, o assistente abrirá o fluxo de eventos criado para você com a origem selecionada do Amazon Managed Streaming for Apache Kafka. Para fechar o assistente, selecione Fechar na parte inferior da página.
No hub em tempo real, mude para a guia Fluxos de dados do hub em tempo real. Atualize a página. O fluxo de dados criado para você é exibido.
Para obter etapas detalhadas, confira View details of data streams in Fabric Real-Time hub.
Conteúdo relacionado
Para saber mais sobre consumo de fluxos de dados, confira os seguintes artigos: