Mikä on Livy-ohjelmointirajapinta tietotekniikkaan?
Huomautus
Fabric Data Engineeringin Livy-ohjelmointirajapinta on esikatselussa.
Koskee seuraavia:✅ Microsoft Fabricin tietotekniikka ja datatiede
Microsoft Fabric Livy -ohjelmointirajapinnan avulla käyttäjät voivat lähettää ja suorittaa Spark-koodia Fabric Lakehouseen liittyvässä Spark-tietojenkäsittelyssä. Tämän ansiosta muistikirja- tai Spark Job Definition -artefakteja ei tarvitse luoda. Tämä Lakehouse-integrointi varmistaa OneLakeen tallennettujen tietojen yksinkertaisen käytön.
Ominaisuudet
Fabric Livy -ohjelmointirajapinnan avulla työt voidaan lähettää kahdessa eri tilassa:
- Istuntotyöt
- Livy-istuntotyön seurauksena luodaan Spark-istunto, joka on aktiivinen koko Livy-ohjelmointirajapinnan kanssa vuorovaikutuksen ajan. Livy-istunnot ovat hyödyllisiä vuorovaikutteisille kuormituksille.
- Spark-istunto käynnistyy, kun työ lähetetään, ja kestää kunnes käyttäjä lopettaa sen tai järjestelmä lopettaa sen, kun se on ollut käyttämättömänä 20 minuuttia. Koko istunnon ajan voidaan suorittaa useita töitä, jakaa tilaa ja välimuistiin tallennettuja tietoja suoritusten välillä.
- Erätöiden
- Livy-erätyön pitää sisältää Spark-sovelluksen lähettämisen yksittäistä työn suorittamista varten. Livy-istunnon työhön verrattuna erätyö ei ylläpidä käynnissä olevaa Spark-istuntoa.
- Livy-erätöissä jokainen työ käynnistää uuden Spark-istunnon, joka päättyy, kun työ on valmis. Tämä lähestymistapa toimii hyvin tehtävissä, jotka eivät perustu aiempiin laskentaan tai edellytä tilan ylläpitämistä töiden välillä.
Livy-ohjelmointirajapinnan käytön aloittaminen
Lue, miten voit luoda ja suorittaa Spark-töitä Livy-ohjelmointirajapinnan avulla Fabricissa valitsemalla joko Lähetä Spark -istuntotyöt Livy-ohjelmointirajapinnan avulla tai Lähetä Spark -erätyöt Livy-ohjelmointirajapinnan avulla.