Compartilhar via


Adicionar o Amazon Managed Streaming for Apache Kafka (MSK) como origem no hub em tempo real (demonstração)

Este artigo descreve como adicionar o Amazon Streaming for Apache Kafka (MSK) como uma fonte de eventos no hub do Fabric Real-Time.

O Amazon MSK Kafka é um serviço Kafka totalmente gerenciado que simplifica a configuração, a escalabilidade e o gerenciamento. Ao integrar o Amazon MSK Kafka como uma fonte em seu fluxo de eventos, você pode trazer facilmente os eventos em tempo real do seu MSK Kafka e processá-los antes de roteá-los para vários destinos no Fabric. 

Observação

Atualmente, o hub em tempo real está em preview.

Pré-requisitos

  • Obtenha acesso ao espaço de trabalho premium do Fabric com permissões de Contribuidor ou superiores.
  • Um cluster do Amazon MSK Kafka em status ativo.
  • Seu cluster do Amazon MSK Kafka deve ser acessível publicamente e não estar protegido por um firewall ou protegido em uma rede virtual.

Iniciar Adicionar experiência de origem

  1. Entre no Microsoft Fabric.

  2. Selecione Hub em Tempo Real na barra de navegação esquerda.

  3. Na página do hub em tempo real, selecione + Adicionar fonte no canto superior direito da página.

    Captura de tela mostrando como iniciar o hub em tempo real no Microsoft Fabric.

Adicionar o Amazon Managed Streaming for Apache Kafka como origem

  1. Na página Selecionar uma fonte de dados , selecione Amazon MSK Kafka.

    Captura de tela que mostra a seleção do Amazon MSK Kafka como o tipo de origem no assistente Obter eventos.

  2. Na página Conectar, selecione Nova conexão.

    Captura de tela mostrando a escolha do link Nova conexão na página Conectar do assistente Obter eventos.

  3. Na seção Configurações de conexão , para Bootstrap Server, insira o ponto de extremidade público do cluster do Kafka.

    Captura de tela que mostra a seleção do campo Servidor de inicialização na página Conectar do assistente Obter eventos.

    Para obter o ponto de extremidade público:

    Captura de tela que mostra o endpoint público do cluster do Amazon MSK.

  4. Na seção Credenciais de conexão, se você tiver uma conexão existente com o cluster do Amazon MSK Kafka, selecione-a na lista suspensa para Conexão. Caso contrário, siga estas etapas:

    1. Em Nome da conexão, insira um nome para a conexão.
    2. Em Tipo de autenticação, confirme se a chave de API está selecionada.
    3. Em Key and Secret (Chave e segredo), insira a chave de API e a chave Secret (Segredo) para o cluster do Amazon MSK Kafka.
  5. Selecione Conectar. 

  6. Agora, na página Conectar, siga estas etapas.

    1. Em Tópico, insira o tópico Kafka.

    2. Em Grupo de consumidores, insira o grupo de consumidores do cluster do Kafka. Este campo fornece um grupo de consumidores dedicado para obter eventos.

    3. Selecione Redefinir deslocamento automático para especificar por onde começar a ler deslocamentos se não houver confirmação.

    4. Para Protocolo de segurança, o valor padrão é SASL_SSL. O mecanismo SASL padrão é SCRAM-SHA-512 e não pode ser alterado.

      Captura de tela que mostra a primeira página das configurações de conexão do Amazon MSK Kafka.

  7. Selecione Avançar. Na tela Revisar e criar, revise o resumo e selecione Adicionar.

Exibir detalhes do fluxo de dados

  1. Na página Revisar e criar , se você selecionar Abrir fluxo de eventos, o assistente abrirá o fluxo de eventos criado para você com a origem selecionada do Amazon Managed Streaming for Apache Kafka. Para fechar o assistente, selecione Fechar na parte inferior da página.

  2. No hub em tempo real, mude para a guia Fluxos de dados do hub em tempo real. Atualize a página. O fluxo de dados criado para você é exibido.

    Para obter etapas detalhadas, confira View details of data streams in Fabric Real-Time hub.

Para saber mais sobre consumo de fluxos de dados, confira os seguintes artigos: