Verbinding maken met Matillion
Matillion ETL is een ETL-/ELT-hulpprogramma dat speciaal is gebouwd voor clouddatabaseplatforms, waaronder Azure Databricks. Matillion ETL heeft een moderne, browsergebaseerde gebruikersinterface, met krachtige, push-down ETL/ELT-functionaliteit.
U kunt uw Databricks SQL-warehouses (voorheen Databricks SQL-eindpunten) en Azure Databricks-clusters integreren met Matillion.
Verbinding maken met Matillion via Partner Connect
In deze sectie wordt beschreven hoe u Partner Connect gebruikt om het proces van het verbinden van een bestaand SQL Warehouse of cluster in uw Azure Databricks-werkruimte met Matillion te vereenvoudigen.
Eisen
Zie de vereisten voor het gebruik van Partner Connect.
Stappen om verbinding te maken
Volg de stappen in deze sectie om verbinding te maken met Matillion met behulp van Partner Connect.
Tip
Als u een bestaand Matillion-account hebt, raadt Databricks u aan om handmatig verbinding te maken met Matillion. Dit komt doordat de verbindingservaring in Partner Connect is geoptimaliseerd voor nieuwe partneraccounts.
Klik in de zijbalk op Marketplace-.
Klik in Partner Connect-integratiesop Alles weergeven.
Klik op de tegel Matillion .
In het vak E-mail wordt het e-mailadres voor uw Azure Databricks-account weergegeven. Matillion gebruikt dit e-mailadres om u te vragen een nieuw Matillion-account te maken of u aan te melden bij uw bestaande Matillion-account.
Klik op Verbinding maken met Matillion ETL of meld u aan.
Er wordt een nieuw tabblad geopend in uw browser waarin de Matillion Hub wordt weergegeven.
Voltooi de instructies op het scherm in Matillion om uw 14-daagse proefaccount voor Matillion te maken of om u aan te melden bij uw bestaande Matillion-account.
Belangrijk
Als er een foutbericht wordt weergegeven waarin wordt aangegeven dat iemand van uw organisatie al een account heeft gemaakt met Matillion, neemt u contact op met een van de beheerders van uw organisatie en voegt u deze toe aan het miljoenenaccount van uw organisatie. Nadat ze u hebben toegevoegd, meldt u zich aan bij uw bestaande Matillion-account.
Voltooi de instructies op het scherm om uw taakgegevens op te geven en klik vervolgens op Doorgaan.
Voltooi de instructies op het scherm om een organisatie te maken en klik vervolgens op Doorgaan.
Klik op de organisatie die u hebt gemaakt en klik vervolgens op Matillion ETL-exemplaar toevoegen.
Klik op Doorgaan in Azure.
De Azure-portal wordt geopend.
Volg Het starten van Matillion ETL vanuit een Azure ARM-sjabloon in de matillion ETL-documentatie, te beginnen met stap 6.
Volg de instructies in de matillion ETL-documentatie.
Matillion ETL wordt geopend in uw browser en het dialoogvenster Project maken wordt weergegeven.
Volg Een Delta Lake maken in databricks-project in de documentatie van Matillion.
Voer de volgende informatie in voor de instellingen in de sectie Delta Lake Connection in deze instructies:
-
Voer voor werkruimte-id de werkruimte-id in van uw Azure Databricks-URL per werkruimte. Neem niets op na de eerste punt (
.
). Zie namen, URL's en id's van werkruimte-exemplaren. - Voer bij Gebruikersnaam het woord
token
in. - Voer voor Wachtwoord de waarde in van een persoonlijk toegangstoken van Azure Databricks.
Ga als volgt te werk om de werkruimte-id op te halen en een persoonlijk toegangstoken te genereren:
Ga terug naar het tabblad Partner Connect in uw browser.
Noteer de werkruimte-id.
Klik op Een nieuw token genereren.
Er wordt een nieuw tabblad geopend in uw browser waarop de pagina Instellingen van de Gebruikersinterface van Azure Databricks wordt weergegeven.
Klik op Nieuw token genereren.
Voer eventueel een beschrijving (opmerking) en verloopperiode in.
Klik op Genereren.
Kopieer het gegenereerde persoonlijke toegangstoken en sla het op een veilige locatie op.
Ga terug naar het tabblad Matillion in uw browser.
Voor de instellingen in de sectie Standaardinstellingen voor Delta Lake in deze instructies kiest u voor Cluster de naam van het SQL-warehouse of -cluster.
-
Voer voor werkruimte-id de werkruimte-id in van uw Azure Databricks-URL per werkruimte. Neem niets op na de eerste punt (
Ga door met volgende stappen.
Handmatig verbinding maken met Matillion
In deze sectie wordt beschreven hoe u een bestaand SQL-warehouse of -cluster in uw Azure Databricks-werkruimte handmatig verbindt met Matillion.
Notitie
U kunt verbinding maken met Matillion met behulp van Partner Connect om de ervaring te vereenvoudigen.
Eisen
Voordat u handmatig integreert met Matillion, moet u het volgende hebben:
Een Matillion ETL-exemplaar, dat u kunt starten met behulp van De Azure Marketplace of Azure Resource Manager (ARM).
Een persoonlijk toegangstoken van Azure Databricks of een Microsoft Entra ID-token.
Notitie
Als best practice voor beveiliging, wanneer u zich verifieert met geautomatiseerde hulpprogramma's, systemen, scripts en apps, raadt Databricks u aan om persoonlijke toegangstokens te gebruiken die behoren tot service-principals in plaats van werkruimtegebruikers. Zie Tokens voor een service-principal beheren om tokens voor service-principals te maken.
Stappen om verbinding te maken
Ga als volgt te werk om handmatig verbinding te maken met Matillion:
Haal de naam op van de bestaande rekenresource die u wilt gebruiken (een SQL Warehouse of cluster) in uw werkruimte. Later kiest u die naam om de verbinding tussen uw rekenresource en uw Matillion ETL-exemplaar te voltooien.
- Als u SQL Warehouses in uw werkruimte wilt weergeven, klikt u op SQL Warehouses in de zijbalk. Zie Een SQL-warehouse maken om een nieuw SQL-warehouse te maken.
- Als u de clusters in uw werkruimte wilt weergeven, klikt u op Compute in de zijbalk. Als u een cluster wilt maken, raadpleegt u de compute-configuratiereferentie.
Volg Connect to your Matillion ETL instance and log in it in the Matillion documentation.
Volg Een Delta Lake maken in databricks-project in de documentatie van Matillion.
Voer de volgende informatie in voor de instellingen in de sectie Delta Lake Connection in deze instructies:
-
Voer voor werkruimte-id de werkruimte-id in van uw Azure Databricks-URL per werkruimte. Neem niets op na de eerste punt (
.
). Zie namen, URL's en id's van werkruimte-exemplaren. - Voer bij Gebruikersnaam het woord
token
in. - Voer voor Wachtwoord het persoonlijke toegangstoken van Azure Databricks of het Microsoft Entra ID-token in.
Voor de instellingen in de sectie Standaardinstellingen voor Delta Lake in deze instructies kiest u voor Cluster de naam van het SQL-warehouse of -cluster.
-
Voer voor werkruimte-id de werkruimte-id in van uw Azure Databricks-URL per werkruimte. Neem niets op na de eerste punt (
Ga door met volgende stappen.
Volgende stappen
Bekijk een of meer van de volgende bronnen op de website van Matillion: