Migrace knihoven Sparku z Azure Synapse do prostředků infrastruktury
Fond Azure Synapse Spark nabízí různé možnosti informačního kanálu a vlastní knihovny. V prostředcích infrastruktury se každý modul runtime dodává s předinstalovanou sadou knihoven (předdefinované knihovny). Na základě vašich scénářů a konkrétních potřeb ale můžete zahrnout i další knihovny využívající knihovny prostředí a vložené knihovny. Pokud chcete přesunout knihovny fondu Azure Synapse Spark do prostředků infrastruktury, použijte knihovny prostředí.
Důležité informace o knihovně Sparku najdete v rozdílech mezi Azure Synapse Sparkem a prostředky infrastruktury.
Požadavky
- Pokud ho ještě nemáte, vytvořte ve svém tenantovi pracovní prostor Fabric.
- Pokud ho ještě nemáte, vytvořte ve svém pracovním prostoru prostředí .
Možnost 1: Přidání knihoven Sparku do vlastního prostředí
Knihovny fondu Sparku můžete přesunout do prostředí následujícím způsobem:
- Otevřete Synapse Studio: Přihlaste se do Azure. Přejděte do svého pracovního prostoru Azure Synapse a otevřete Synapse Studio.
-
Vyhledejte knihovny Sparku:
- Přejděte do části Spravovat oblast a vyberte ve fondech Apache Sparku.
- Vyhledejte fond Apache Spark, vyberte Balíčky a vyhledejte knihovny Sparku pro fond.
- Získat knihovny Sparku: Vyhledejte balíčky requirements.txt, environment.yml nebo pracovních prostorů nainstalovaných ve fondu. Získejte seznam nainstalovaných knihoven ve fondu.
- Jakmile budete mít knihovny Sparku, přidejte vlastní knihovny Sparku do prostředí v prostředcích infrastruktury. V prostředí přejděte do knihoven a přidejte knihovny:
- Z veřejných knihoven můžete nahrát soubor .yml. Knihovny můžete také nainstalovat pomocí PyPI a Conda.
- Z vlastních knihoven můžete knihovny nainstalovat pomocí souborů .jar/.whl/.tar.gz.
- Klikněte na Uložit a publikovat změny.
Přečtěte si další informace o přidávání knihoven Sparku do prostředí.
Poznámka:
Upozorňujeme, že instalace knihovny může nějakou dobu trvat.