Verbinding maken met Fivetran

De geautomatiseerde gegevensintegratie van Fivetran wordt aangepast naarmate schema's en API's veranderen, waardoor betrouwbare gegevenstoegang en vereenvoudigde analyse mogelijk is met kant-en-klare queryschema's.

U kunt uw Databricks SQL-warehouses (voorheen Databricks SQL-eindpunten) en Azure Databricks-clusters integreren met Fivetran. De Fivetran-integratie met Azure Databricks helpt u bij het centraliseren van gegevens uit verschillende gegevensbronnen in Delta Lake.

Verbinding maken met Fivetran via Partner Connect

In deze sectie wordt beschreven hoe u verbinding maakt met Fivetran met behulp van Partner Connect. Elke gebruiker maakt een eigen verbinding.

Notitie

De verbindingservaring per gebruiker bevindt zich in openbare preview. U kunt de mogelijkheid om verbindingen per gebruiker te maken uitschakelen door contact op te leggen met uw Azure Databricks-accountteam.

Voordat u verbinding maakt met behulp van Partner Connect

Voordat u verbinding maakt met Fivetran met behulp van Partner Connect, moet u het volgende hebben:

• De gebruikersrol werkruimtebeheerder of de volgende machtigingen:
  • De MACHTIGING CAN USE voor een SQL Warehouse
  • De MACHTIGING CAN USE voor tokengebruik
• Voor gegevens die worden beheerd door Unity Catalog, zijn de volgende metastore-objectbevoegdheden voor de catalogus waarnaar u Fivetran wilt schrijven:
  • USE CATALOG enCREATE SCHEMA op de catalogus.
  • (Optioneel) Als u een doellocatie wilt opgeven, CREATE EXTERNAL TABLE op de externe locatie uitvoeren en toegang verkrijgen tot gegevens in cloudobjectopslag.
• Voor gegevens die worden beheerd door de oude Hive-metastore, zijn de volgende metastore-objectbevoegdheden nodig voor de catalogus waarnaar u Fivetran wilt laten schrijven:
  • USAGE en CREATE in de catalogus
  • (Optioneel) Als u een doellocatie wilt opgeven, hebt u toegang tot gegevens in de opslag van cloudobjecten.

Bevoegdheden voor Unity Catalog-metastore-objecten kunnen worden verleend door een metastore-beheerder, de eigenaar van het object of de eigenaar van de catalogus of het schema dat het object bevat. Zie Unity Catalog-bevoegdheden en beveiligbare objectenvoor meer informatie.

Bevoegdheden voor verouderde Hive-metastore-objecten kunnen worden verleend door een werkruimtebeheerder of de eigenaar van het object. Zie Hive-metastore-bevoegdheden en beveiligbare objecten (verouderd) voor meer informatie.

Toegang tot gegevens in de opslag van cloudobjecten moet worden geconfigureerd door een werkruimtebeheerder met voldoende machtigingen in het opslagaccount voor cloudobjecten. Zie Configuratie voor gegevenstoegang inschakelen voor meer informatie.

Stappen voor partnerverbinding

Ga als volgt te werk om uw Azure Databricks-werkruimte te verbinden met Fivetran met behulp van Partner Connect:

1. Klik in de zijbalk op Partner Connect.

2. Klik op de tegel Fivetran .

   Met de stappen in deze sectie maakt u een fivetran-proefaccount op gebruikersniveau. Als u zich wilt aanmelden bij een bestaand fivetran-proefaccount op werkruimteniveau, klikt u op Bestaande verbinding gebruiken, voert u de instructies op het scherm uit om u aan te melden bij Fivetran en slaat u de rest van de stappen in dit artikel over.

3. Selecteer een SQL-warehouse. Als het SQL Warehouse is gestopt, klikt u op Start.

4. Als uw werkruimte is ingeschakeld voor Unity Catalog, selecteert u een catalogus waar Fivetran naar kan schrijven en klikt u op Volgende.

   Partner Connect genereert een persoonlijk Azure Databricks-toegangstoken dat is gekoppeld aan uw gebruiker.

5. Klik op Verbinding maken met Fivetran.

   Er wordt een nieuw tabblad geopend in uw webbrowser waarin de Fivetran-website wordt weergegeven.

6. Voltooi de instructies op het scherm op de Fivetran-website om uw proefpartneraccount te maken.

Handmatig verbinding maken met Fivetran

Bekijk deze YouTube-video (2 minuten) voor een overzicht van de handmatige verbindingsprocedure.

Notitie

Gebruik Partner Connect om sneller verbinding te maken met een SQL Warehouse met Fivetran.

Voordat u handmatig verbinding maakt

Voordat u handmatig verbinding maakt met Fivetran, moet u het volgende hebben:

• Een cluster of SQL Warehouse in uw Azure Databricks-werkruimte.

  • Naslaginformatie over de rekenconfiguratie.
  • Maak een SQL Warehouse.

• De verbindingsgegevens voor uw cluster of SQL Warehouse, met name de serverhostnaam, poorten HTTP-pad waarden.

  • Verbindingsgegevens ophalen voor een Azure Databricks-rekenresource.

• Een persoonlijk toegangstoken van Azure Databricks of een Microsoft Entra ID-token (voorheen Azure Active Directory).. Als u een persoonlijk toegangstoken wilt maken, volgt u de stappen in persoonlijke toegangstokens van Azure Databricks voor werkruimtegebruikers.

  Notitie

  Als best practice voor beveiliging, wanneer u zich verifieert met geautomatiseerde hulpprogramma's, systemen, scripts en apps, raadt Databricks u aan om persoonlijke toegangstokens te gebruiken die behoren tot service-principals in plaats van werkruimtegebruikers. Zie Tokens voor een service-principal beheren om tokens voor service-principals te maken.

Tip

Als de tegel Fivetran in Partner Connect in uw werkruimte een vinkje bevat, kunt u de verbindingsgegevens voor het verbonden SQL-magazijn ophalen door op de tegel te klikken en vervolgens verbindingsdetailsuit te vouwen. Het persoonlijke toegangstoken is verborgen. U moet een vervangend persoonlijk toegangstoken maken en dat nieuwe token invoeren wanneer Fivetran u hiervoor vraagt.

Handmatige stappen

Ga als volgt te werk om handmatig verbinding te maken met Fivetran:

1. Meld u aan bij uw Fivetran-account of maak een nieuw Fivetran-account op https://fivetran.com/login.

   Belangrijk

   Als u zich aanmeldt bij het Fivetran-account van uw organisatie, kan op een pagina Bestemming kiezen een of meer bestaande doelvermeldingen worden weergegeven met het Databricks-logo. Deze vermeldingen bevatten mogelijk verbindingsgegevens voor rekenresources in werkruimten die gescheiden zijn van die van u. Als u een van deze verbindingen nog steeds opnieuw wilt gebruiken en u de rekenresource vertrouwt en er toegang toe hebt, kiest u die bestemming en gaat u verder met de volgende stappen. Kies anders een beschikbare bestemming om voorbij deze pagina te komen.

2. Klik op de pagina Dashboard in Fivetran op het tabblad Bestemmingen .

3. Klik op Bestemming toevoegen.

4. Voer een doelnaam in en klik op Toevoegen.

5. Klik op de Fivetran moderne ELT-pagina op Een connector instellen.

6. Klik op een gegevensbron en klik vervolgens op Volgende.

7. Volg de instructies op het scherm in de installatiehandleiding in Fivetran om het instellen van de connector te voltooien.

8. Klik op Opslaan en testen.

9. Nadat de test is voltooid, klikt u op Doorgaan.

10. Klik op de pagina Selecteer de bestemming van uw gegevens op de optie Databricks in Azure.

11. Klik op Doorgaan met instellen.

12. Vul de instructies op het scherm in Fivetran in om de verbindingsgegevens voor uw bestaande Azure Databricks-rekenresource in te voeren, met name de serverhostnaam en HTTP-pad veldwaarden, en het token dat u eerder hebt gegenereerd.

13. Klik op Opslaan en testen.

14. Nadat de test is geslaagd, klikt u op Doorgaan.

15. Ga verder met de volgende stappen.

Aanvullende informatiebronnen

Bekijk een of meer van de volgende bronnen op de Website van Fivetran:

• Aan de slag
• Architectuur
• Connectoren
• Bestemmingen
• Synchronisatieoverzicht
• Transformaties
• Documentatie voor Fivetran
• Ondersteuning voor Fivetran