Udostępnij za pośrednictwem

Dodawanie źródła platformy Kafka confluent do strumienia zdarzeń

  • Artykuł

W tym artykule pokazano, jak dodać źródło platformy Kafka platformy Confluent do strumienia zdarzeń.

Confluent Cloud Kafka to platforma przesyłania strumieniowego oferująca zaawansowane funkcje przesyłania strumieniowego i przetwarzania danych przy użyciu platformy Apache Kafka. Integrując platformę Confluent Cloud Kafka jako źródło w strumieniu zdarzeń, można bezproblemowo przetwarzać strumienie danych w czasie rzeczywistym przed kierowaniem ich do wielu miejsc docelowych w sieci szkieletowej.

Uwaga

To źródło nie jest obsługiwane w następujących regionach pojemności obszaru roboczego: Zachodnie stany USA3, Szwajcaria Zachodnia.

Wymagania wstępne

  • Dostęp do obszaru roboczego w trybie licencji pojemności sieci szkieletowej (lub) w trybie licencji próbnej z uprawnieniami współautora lub wyższymi uprawnieniami.
  • Klaster Platformy Kafka w chmurze Confluent i klucz interfejsu API.
  • Klaster platformy Kafka w chmurze Confluent musi być publicznie dostępny i nie być za zaporą lub zabezpieczony w sieci wirtualnej.
  • Jeśli nie masz strumienia zdarzeń, utwórz strumień zdarzeń.

Uruchamianie kreatora Wybieranie źródła danych

Jeśli jeszcze nie dodano żadnego źródła do strumienia zdarzeń, wybierz pozycję Użyj kafelka zewnętrznego źródła .

Zrzut ekranu przedstawiający wybór kafelka Użyj zewnętrznego źródła.

Jeśli dodasz źródło do już opublikowanego strumienia zdarzeń, przełącz się do trybu edycji , wybierz pozycję Dodaj źródło na wstążce, a następnie wybierz pozycję Źródła zewnętrzne.

Zrzut ekranu przedstawiający wybór menu Dodaj źródło do źródeł zewnętrznych.  

Konfigurowanie platformy Confluent Kafka i nawiązywanie z nią połączenia

  1. Na stronie Wybieranie źródła danych wybierz pozycję Confluent.

    Zrzut ekranu przedstawiający wybór elementu Confluent jako typ źródła w kreatorze Pobieranie zdarzeń.

  2. Aby utworzyć połączenie ze źródłem platformy Kafka w chmurze Confluent, wybierz pozycję Nowe połączenie.

    Zrzut ekranu przedstawiający wybór linku Nowe połączenie na stronie Łączenie kreatora Pobieranie zdarzeń.

  3. W sekcji Ustawienia połączenia wprowadź ciąg Confluent Bootstrap Server. Przejdź do strony głównej platformy Confluent Cloud, wybierz pozycję Ustawienia klastra i skopiuj adres do serwera Bootstrap.

  4. W sekcji Poświadczenia połączenia, jeśli masz istniejące połączenie z klastrem Confluent, wybierz je z listy rozwijanej Połączenie. W przeciwnym razie wykonaj następujące kroki:

    1. W polu Nazwa połączenia wprowadź nazwę połączenia.
    2. W polu Rodzaj uwierzytelniania upewnij się, że wybrano pozycję Confluent Cloud Key (Klucz chmury platformy Confluent).
    3. Klucz interfejsu API i klucz interfejsu API :

      1. Przejdź do chmury Confluent.

      2. Wybierz pozycję Klucze interfejsu API w menu bocznym.

      3. Wybierz przycisk Dodaj klucz, aby utworzyć nowy klucz interfejsu API.

      4. Skopiuj klucz interfejsu API i klucz tajny.

      5. Wklej te wartości w polach Klucz interfejsu API i Klucz tajny klucza interfejsu API.

      6. Wybierz pozycję Połącz

        Zrzut ekranu przedstawiający pierwszą stronę ustawień połączenia confluent.

  5. Przewiń, aby wyświetlić sekcję Konfigurowanie źródła danych confluent na stronie. Wprowadź informacje, aby ukończyć konfigurację źródła danych Confluent.

    1. W polu Temat wprowadź nazwę tematu z chmury Confluent. Temat można utworzyć lub zarządzać nim w konsoli confluent Cloud Console.
    2. W polu Grupa odbiorców wprowadź grupę odbiorców chmury Confluent. Zapewnia ona dedykowaną grupę odbiorców na potrzeby pobierania zdarzeń z klastra confluent Cloud.
    3. W obszarze Resetuj ustawienie automatycznego przesunięcia wybierz jedną z następujących wartości:

      • Najwcześniej — najwcześniejsze dane dostępne z klastra Confluent

      • Najnowsze — najnowsze dostępne dane

      • Brak — nie ustawiaj automatycznie przesunięcia.

        Zrzut ekranu przedstawiający drugą stronę — Konfigurowanie źródła danych Confluent — ustawień połączenia Confluent.

  6. Wybierz Dalej. Na ekranie Przeglądanie i tworzenie przejrzyj podsumowanie, a następnie wybierz pozycję Dodaj.

Zobaczysz, że źródło platformy Kafka w chmurze Confluent jest dodawane do strumienia zdarzeń na kanwie w trybie edycji. Aby zaimplementować to nowo dodane źródło platformy Kafka w chmurze Confluent, wybierz pozycję Publikuj na wstążce.

Zrzut ekranu przedstawiający źródło platformy Kafka platformy Confluent w widoku edycji.

Po wykonaniu tych kroków źródło platformy Kafka w chmurze Confluent jest dostępne do wizualizacji w widoku na żywo.

Zrzut ekranu przedstawiający źródło platformy Kafka platformy Confluent w widoku na żywo.

Ograniczenia

  • Platforma Confluent Kafka z formatami JSON i Avro przy użyciu rejestru schematów nie jest obecnie obsługiwana.
  • Dekodowanie danych z platformy Confluent Kafka przy użyciu rejestru schematów confluent nie jest obecnie obsługiwane.

Uwaga

Maksymalna liczba źródeł i miejsc docelowych dla jednego strumienia zdarzeń wynosi 11.

Powiązana zawartość

Inne łączniki: