通过

在 Fabric 上安装不同版本的 SynapseML

  • 项目

SynapseML 已预安装在 Fabric 上。 如果要使用其他版本，可以使用 %%configure 安装它。

注意

Fabric 笔记本目前尚未正式支持 %%configure，并且无法保证服务级别协议或将来与官方版本的兼容性。

使用 %%configure 安装 SynapseML

以下示例在 Fabric 上安装 SynapseML v0.11.1。 若要使用该示例，请将其粘贴到笔记本中的代码单元格中，然后运行该单元格。

%%configure -f
{
  "name": "synapseml",
  "conf": {
      "spark.jars.packages": "com.microsoft.azure:synapseml_2.12:0.11.1,org.apache.spark:spark-avro_2.12:3.3.1",
      "spark.jars.repositories": "https://mmlspark.azureedge.net/maven",
      "spark.jars.excludes": "org.scala-lang:scala-reflect,org.apache.spark:spark-tags_2.12,org.scalactic:scalactic_2.12,org.scalatest:scalatest_2.12,com.fasterxml.jackson.core:jackson-databind",
      "spark.yarn.user.classpath.first": "true",
      "spark.sql.parquet.enableVectorizedReader": "false",
      "spark.sql.legacy.replaceDatabricksSparkAvro.enabled": "true"
  }
}

检查 SynapseML 版本

若要验证安装是否成功，请在单元格中运行以下代码。 返回的版本号应与你安装的版本号 (0.11.1) 匹配。

import synapse.ml.cognitive
print(f"SynapseML cognitive version: {synapse.ml.cognitive.__version__}")

import synapse.ml.lightgbm
print(f"SynapseML lightgbm version: {synapse.ml.lightgbm.__version__}")

相关内容