既知の問題 - 環境を介してインストールされた .jar ファイルに対して PySpark インポート ステートメントが失敗する
.jar 形式のカスタム ライブラリ ファイルを Fabric 環境にアップロードすることができます。 環境のアップロードと発行は成功しますが、PySpark セッションでのインポート コマンドは失敗します。
状態: オープン
製品エクスペリエンス: Data Engineering
現象
PySpark セッションでは、import library ステートメントが Class not found (クラスが見つかりません) エラーで失敗します。 .jar 形式のカスタム ライブラリは、環境を介してインストールされています。
解決策と回避策
この問題を回避するには、次のコマンドを使用して Notebook セッション %%configure -f { "conf": { "spark.jars": <>", } }
にライブラリをインストールします。または、必要に応じて PySpark から Scala セッションに切り替えることができます。