Spark-kirjastojen siirtäminen Azure Synapse:stä Fabriciin
Azure Synapse Spark -varannossa on erilaisia syöte- ja mukautettuja kirjastovaihtoehtoja. Fabricissa kuhunkin suorituspalveluun sisältyy valmiiksi asennettu joukko kirjastoja (sisäiset kirjastot). Skenaarioiden ja erityistarpeiden perusteella voit kuitenkin sisällyttää myös muita kirjastoja, jotka käyttävät ympäristökirjastoja ja sisäiset kirjastoja. Jos haluat siirtää Azure Synapse Spark-pool-kirjastoja Fabric-kirjastoihin, käytä ympäristökirjastoja.
Jos haluat lisätietoja Spark-kirjastosta, katso Azure Synapse Sparkin ja Fabricin väliset erot.
Edellytykset
- Jos sinulla ei vielä ole Fabric-työtilaa vuokraajassasi, luo Fabric-työtila .
- Jos sinulla ei vielä ole sellaista, luo ympäristö työtilaasi.
Vaihtoehto 1: Spark-kirjastojen lisääminen mukautettuun ympäristöön
Voit siirtää Spark-varannon kirjastot ympäristöön seuraavasti:
- Avaa Synapse Studio: Kirjaudu sisään Azureen. Siirry Azure Synapse työtilaan ja avaa Synapse Studio.
- Etsi Spark-kirjastot:
- Siirry kohtaan Hallitse aluetta ja valitse Apache Spark -altaat.
- Etsi Apache Spark -allas, valitse Paketit ja etsi varannon Spark-kirjastot.
- Hanki Spark-kirjastoja: Etsi varannosta asennetut requirements.txt, environment.yml tai työtilapaketit. Hae varannoseen asennettujen kirjastojen luettelo.
- Kun sinulla on Spark-kirjastoja, lisää mukautettuja Spark-kirjastoja Fabric-ympäristöön. Siirry ympäristössä kirjastoihin ja lisää kirjastoja:
- Yleisistä kirjastoista voit ladata .yml tiedoston. Voit asentaa kirjastoja myös PyPI:n ja Conda:n avulla.
- Mukautettujen kirjastojen avulla voit asentaa kirjastoja käyttämällä .jar/.whl/.tar.gz -tiedostoja.
- Valitse Tallenna ja julkaise muutokset.
Lue lisätietoja Spark-kirjastojen lisäästä ympäristöön.
Muistiinpano
Huomaa, että kirjaston asentaminen voi kestää jonkin aikaa.