將 Spark 組態從 Azure Synapse Analytics 遷移至 Fabric
Apache Spark 提供許多可自定義的組態,以增強各種案例的體驗。 在 Azure Synapse Spark 和網狀架構 資料工程師 中,您可以彈性地納入這些組態或屬性,以量身打造您的體驗。 在 Fabric 中,您可以將 Spark 組態新增至 環境 ,並直接在 Spark 作業內使用內嵌 Spark 屬性。 若要將 Azure Synapse Spark 集區組態移至 Fabric,請使用環境。
如需Spark組態考慮,請參閱 Azure Synapse Spark 與 Fabric 之間的差異。
必要條件
- 如果您還沒有網狀架構工作區,請在租用戶中建立 Fabric 工作區。
- 如果您還沒有環境,請在工作區中建立環境。
選項 1:將 Spark 組態新增至自定義環境
在環境中,您可以設定 Spark 屬性,並將這些設定套用至選取的環境集區。
- 開啟 Synapse Studio:登入 Azure。 瀏覽至 Azure Synapse 工作區並開啟 Synapse Studio。
- 找出 Spark 組態:
- 移至 管理區域,然後選取Apache Spark 集區。
- 尋找 Apache Spark 集區,選取Apache Spark 組態 ,然後找出集區的 Spark 組態名稱。
- 取得 Spark 組態:您可以從組態 + 連結庫>Apache Spark 組態 選取檢視組態 或匯出組態 (.txt/.conf/.json 格式) 來取得這些屬性。
- 設定 Spark 之後,請在 Fabric 中將自訂 Spark 屬性新增至您的環境:
- 在環境 中,移至Spark 計算>Spark 屬性。
- 新增 Spark 設定 您可以手動新增每個,或從.yml匯入。
- 按兩下 儲存 併 發佈 變更。
深入瞭解如何將Spark組態新增至 環境。