適用於 Machine Learning 的 Databricks Runtime 16.1 （Beta）
重要
適用於 Machine Learning 的 Databricks Runtime 16.1 Beta中。 支援環境的內容可能會在Beta期間變更。 變更可以包含套件清單或已安裝套件的版本。
Databricks Runtime 16.1 for Machine Learning 提供 Databricks Runtime 16.1 （Beta），為機器學習和數據科學提供現成to-go 環境。 Databricks Runtime ML 包含許多熱門的機器學習連結庫，包括 TensorFlow、PyTorch 和 XGBoost。 Databricks Runtime ML 包含 AutoML，這是自動定型機器學習管線的工具。 Databricks Runtime ML 也支援使用 TorchDistributor、DeepSpeed 和 Ray 的分散式深度學習訓練。
提示
若要查看已達到終止支援的 Databricks Runtime 版本的發行說明（EoS），請參閱 終止支援 Databricks Runtime 發行說明。 EoS Databricks Runtime 版本已淘汰，且可能未更新。
新功能和改善
Databricks Runtime 16.1 ML 建置在 Databricks Runtime 16.1 之上。 如需 Databricks Runtime 16.1 新功能的相關信息，包括 Apache Spark MLlib 和 SparkR，請參閱 Databricks Runtime 16.1 （Beta） 版本資訊。
系統環境
Databricks Runtime 16.1 ML 中的系統環境與 Databricks Runtime 16.1 不同，如下所示。
- 針對 GPU 叢集，Databricks Runtime ML 包含下列 NVIDIA GPU 連結庫：
- CUDA 12.6
- cublas 12.6.0.22-1
- cusolver 11.6.4.38-1
- cupti 12.6.37-1
- cusparse 12.5.2.23-1
- cuDNN 9.3.0.75-1
- NCCL 2.22.3
- TensorRT 10.2.0.19-1
圖書館
下列各節列出了 Databricks Runtime 16.1 ML 中包含的程式庫，這些程式庫與 Databricks Runtime 16.1 中包含的不同。
在本節中：
頂級圖書館
Databricks Runtime 16.1 ML 包含下列頂尖 函式庫：
- 數據集
- GraphFrames
- MLflow
- PyTorch
- spark-tensorflow-connector
- Scikit-learn
- 串流
- TensorFlow
- TensorBoard
- 變壓器
Python 函式庫
Databricks Runtime 16.1 ML 使用 virtualenv 進行 Python 套件管理，並包含許多熱門 ML 套件。
除了下列各節中指定的套件之外，Databricks Runtime 16.1 ML 也包含下列套件：
- hyperopt 0.2.9+db5
- automl 1.29.0
若要在本機 Python 虛擬環境中重現 Databricks Runtime ML Python 環境，請下載 requirements-16.1.txt 檔案並執行 pip install -r requirements-16.1.txt。 此命令會安裝 Databricks Runtime ML 使用的所有開放原始碼連結庫，但不會安裝 Databricks 所開發的連結庫，例如 databricks-automl、databricks-feature-engineering或 hyperopt的 Databricks 分支。
CPU 集群上的 Python 程式庫
| 圖書館 | 版本 | 圖書館 | 版本 | 圖書館 | 版本 |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | 加速 | 1.1.1 | aiohttp | 3.9.5 |
| aiohttp-cors | 0.7.0 | aiosignal | 1.2.0 | alembic | 1.13.3 |
| 批注類型 | 0.7.0 | anyio | 4.2.0 | argcomplete | 3.5.0 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 | 箭 | 1.2.3 |
| 阿斯特 | 0.8.1 | asttokens | 2.0.5 | astunparse | 1.6.3 |
| async-lru | 2.0.4 | 屬性 | 23.1.0 | audioread | 3.0.1 |
| 自動指令 | 2.2.2 | azure-core | 1.31.0 | azure-cosmos | 4.3.1 |
| azure-identity | 1.18.0 | Azure Blob 儲存空間 | 12.23.1 | azure-storage-file-datalake | 12.17.0 |
| 巴別塔 | 2.11.0 | 退避 | 2.2.1 | backports.tarfile | 1.2.0 |
| bcrypt | 3.2.0 | beautifulsoup4 | 4.12.3 | 黑 | 24.4.2 |
| 漂白劑 | 4.1.0 | 閃爍器 | 1.7.0 | 幸福 | 0.7.11 |
| boto3 | 1.34.69 | botocore | 1.34.69 | Brotli | 1.0.9 |
| cachetools | 5.3.3 | 目錄 | 2.0.10 | category-encoders | 2.6.3 |
| certifi | 2024年6月2日 | cffi | 1.16.0 | chardet | 4.0.0 |
| charset-normalizer | 2.0.4 | 斷路器 | 2.0.0 | 點擊 | 8.1.7 |
| cloudpathlib | 0.19.0 | 雲平台序列化庫 (cloudpickle) | 2.2.1 | cmdstanpy | 1.2.4 |
| 豐富多彩 | 0.5.6 | colorlog | 6.8.2 | 通訊 | 0.2.1 |
| 作曲家 | 0.27.0 | 糖果 | 0.1.5 | configparser | 5.2.0 |
| contourpy | 1.2.0 | coolname | 2.2.0 | 密碼學 | 42.0.5 |
| 單車騎士 | 0.11.0 | cymem | 2.0.10 | Cython | 3.0.11 |
| 英安岩 | 1.8.1 | databricks-automl-runtime | 0.2.21 | Databricks 特徵工程 | 0.7.0 |
| databricks-sdk | 0.30.0 | 數據集 | 3.1.0 | dbl-tempo | 0.1.26 |
| dbus-python | 1.3.2 | debugpy | 1.6.7 | 裝飾器 | 5.1.1 |
| deepspeed | 0.16.0 | defusedxml | 0.7.1 | 荒廢的 | 1.2.14 |
| 蒔蘿 | 0.3.8 | distlib | 0.3.8 | dm-tree | 0.1.8 |
| 文件字符串轉Markdown | 0.11 | 入口點 | 0.4 | 評價 | 0.4.3 |
| 執行 | 0.8.3 | 面向概覽 | 1.1.1 | Farama-Notifications | 0.0.4 |
| fastjsonschema | 2.21.1 | fasttext-wheel | 0.9.2 | 檔案鎖定 | 3.13.1 |
| 燒瓶 | 2.2.5 | flatbuffers | 24.3.25 | fonttools | 4.51.0 |
| fqdn | 1.5.1 | 凍結清單 | 1.4.0 | fsspec | 2023.5.0 |
| 未來 | 0.18.3 | gast | 0.4.0 | gitdb | 4.0.11 |
| GitPython | 3.1.37 | google-api-core | 2.20.0 | Google 認證 | 2.21.0 |
| google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.4.1 | google-cloud-storage | 2.10.0 |
| google-crc32c | 1.6.0 | google-pasta | 0.2.0 | google-resumable-media | 2.7.2 |
| googleapis-common-protos | 1.65.0 | gql | 3.5.0 | graphql-core | 3.2.4 |
| greenlet | 3.0.1 | grpcio | 1.60.0 | grpcio-status | 1.60.0 |
| gunicorn | 20.1.0 | gviz-api | 1.10.0 | 體育館 | 0.28.1 |
| h11 | 0.14.0 | h5py | 3.11.0 | hjson | 3.1.0 |
| 假期 | 0.54 | htmlmin | 0.1.12 | httpcore | 1.0.5 |
| httplib2 | 0.20.4 | httpx | 0.28.0 | huggingface-hub | 0.24.5 |
| idna | 3.7 | ImageHash | 4.3.1 | imageio | 2.33.1 |
| 不平衡學習 | 0.12.3 | importlib-metadata | 6.0.0 | importlib_resources | 6.4.5 |
| 屈折 | 7.3.1 | ipyflow-core | 0.0.201 | ipykernel | 6.28.0 |
| ipython | 8.25.0 | ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 |
| isodate | 0.6.1 | isoduration | 20.11.0 | itsdangerous | 2.2.0 |
| jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 | jaraco.text | 3.12.1 |
| jax-jumpy | 1.0.0 | jedi | 0.19.1 | Jinja2 | 3.1.4 |
| jiter | 0.8.0 | jmespath | 1.0.1 | joblib | 1.4.2 |
| joblibspark | 0.5.1 | json5 | 0.9.6 | jsonpatch | 1.33 |
| jsonpointer | 3.0.0 | jsonschema | 4.19.2 | jsonschema-specifications | 2023年7月1日 |
| Jupyter 事件 | 0.10.0 | jupyter-lsp | 2.2.0 | jupyter_client | 8.6.0 |
| jupyter_core | 5.7.2 | jupyter伺服器 | 2.14.1 | jupyter_server_terminals | 0.4.4 |
| jupyterlab | 4.0.11 | jupyterlab-pygments | 0.1.2 | jupyterlab_server | 2.25.1 |
| keras | 3.6.0 | kiwisolver | 1.4.4 | langchain | 0.3.8 |
| langchain-core | 0.2.41 | langchain 文本切分工具 | 0.2.4 | langcodes | 3.4.1 |
| langsmith | 0.1.129 | 語言資料 | 1.2.0 | launchpadlib | 1.11.0 |
| lazr.restfulclient | 0.14.6 | lazr.uri | 1.0.6 | lazy_loader | 0.4 |
| libclang | 15.0.6.1 | librosa | 0.10.2 | lightgbm | 4.5.0 |
| 閃電公用程式 | 0.11.9 | linkify-it-py | 2.0.0 | llvmlite | 0.42.0 |
| lz4 | 4.3.2 | Mako | 1.2.0 | marisa-trie | 1.2.0 |
| Markdown | 3.4.1 | markdown-it-py | 2.2.0 | MarkupSafe | 2.1.3 |
| matplotlib | 3.8.4 | matplotlib-inline | 0.1.6 | mccabe | 0.7.0 |
| mdit-py-plugins | 0.3.0 | mdurl | 0.1.0 | memray | 1.14.0 |
| 調音不當 | 2.0.4 | ml-dtypes | 0.4.1 | mlflow-skinny | 2.15.1 |
| more-itertools | 10.3.0 | mosaicml-cli | 0.6.41 | 馬賽克ml-streaming | 0.8.0 |
| mpmath | 1.3.0 | msal | 1.31.1 | msal-extensions | 1.2.0 |
| msgpack | 1.1.0 | multidict | 6.0.4 | multimethod | 1.12 |
| 多程序 | 0.70.16 | murmurhash | 1.0.11 | mypy | 1.10.0 |
| mypy-extensions | 1.0.0 | namex | 0.0.8 | nbclient | 0.8.0 |
| nbconvert | 7.10.0 | nbformat | 5.9.2 | nest-asyncio | 1.6.0 |
| networkx | 3.2.1 | 忍者 | 1.11.1.1 | nltk | 3.8.1 |
| nodeenv | 1.9.1 | 筆記本 | 7.0.8 | notebook_shim | 0.2.3 |
| numba | 0.59.1 | numpy | 1.26.4 | nvidia-ml-py | 12.560.30 |
| oauthlib | 3.2.0 | oci | 2.139.0 | openai | 1.55.1 |
| opencensus | 0.11.4 | opencensus-context | 0.1.3 | opentelemetry-api | 1.28.2 |
| opentelemetry-sdk | 1.28.2 | opentelemetry-semantic-conventions | 0.49b2 | opt_einsum | 3.4.0 |
| optree | 0.12.1 | optuna | 3.6.1 | optuna-integration | 3.6.0 |
| orjson | 3.10.12 | 覆蓋 | 7.4.0 | 包裝 | 24.1 |
| 熊貓 | 1.5.3 | pandocfilters | 1.5.0 | paramiko | 3.4.0 |
| parso | 0.8.3 | pathspec | 0.10.3 | 佩西 | 0.5.6 |
| pexpect | 4.8.0 | phik | 0.12.4 | 枕頭 | 10.3.0 |
| 果仁 | 24.2 | platformdirs | 3.10.0 | plotly | 5.22.0 |
| 插入式 | 1.0.0 | pmdarima | 2.0.4 | 狗狗 | 1.8.2 |
| portalocker | 2.10.1 | preshed | 3.0.9 | prometheus-client | 0.14.1 |
| prompt-toolkit | 3.0.43 | 先知 | 1.1.5 | proto-plus | 1.24.0 |
| protobuf | 4.24.1 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| ptyprocess | 0.7.0 | pure-eval | 0.2.2 | py-cpuinfo | 9.0.0 |
| py-spy | 0.3.14 | pyarrow | 15.0.2 | pyarrow-Hotfix | 0.6 |
| pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 | pybind11 | 2.13.6 |
| pyccolo | 0.0.65 | pycparser | 2.21 | pydantic | 2.8.2 |
| pydantic_core | 2.20.1 | pyflakes | 3.2.0 | Pygments | 2.15.1 |
| PyGObject | 3.48.2 | PyJWT | 2.7.0 | PyNaCl | 1.5.0 |
| pyodbc | 5.0.1 | pyOpenSSL | 24.0.0 | pyparsing | 3.0.9 |
| pyright | 1.1.294 | pytesseract | 0.3.10 | python-dateutil | 2.9.0.post0 |
| Python 編輯器 | 1.0.4 | python-json-logger | 2.0.7 | python-lsp-jsonrpc | 1.1.2 |
| python-lsp-server | 1.10.0 | python-snappy | 0.6.1 | pytoolconfig | 1.2.6 |
| pytorch-ranger | 0.1.1 | pytz | 2024.1 | PyWavelets | 1.5.0 |
| PyYAML | 6.0.1 | pyzmq | 25.1.2 | 問卷 | 1.10.0 |
| 射線 | 2.35.0 | 引用 | 0.30.2 | regex | 2023.10.3 |
| 要求 | 2.32.2 | requests-oauthlib | 1.3.1 | rfc3339-validator | 0.1.4 |
| rfc3986-validator | 0.1.1 | 富 | 13.3.5 | 繩 | 1.12.0 |
| rpds-py | 0.10.6 | rsa | 4.9 | ruamel.yaml | 0.18.6 |
| ruamel.yaml.clib | 0.2.8 | s3transfer | 0.10.2 | safetensors | 0.4.4 |
| scikit-image | 0.23.2 | scikit-learn | 1.4.2 | scipy | 1.13.1 |
| seaborn | 0.13.2 | Send2Trash | 1.8.2 | 句子轉換器 | 3.3.1 |
| sentencepiece | 0.2.0 | setuptools | 74.0.0 | shap | 0.46.0 |
| shellingham | 1.5.4 | simplejson | 3.17.6 | 六 | 1.16.0 |
| 切片機 | 0.0.8 | smart-open | 5.2.1 | smmap | 5.0.0 |
| sniffio | 1.3.0 | soundfile | 0.12.1 | 濾湯器 | 2.5 |
| soxr | 0.5.0.post1 | spacy | 3.7.5 | spacy-legacy | 3.0.12 |
| spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.30 | sqlparse | 0.4.2 |
| 認真嗎 | 2.4.8 | ssh-import-id | 5.11 | 堆疊資料 | 0.2.0 |
| stanio | 0.5.1 | statsmodels | 0.14.2 | sympy | 1.13.1 |
| 製成表格 | 0.9.0 | 混亂-up-in-unicode | 0.2.0 | 韌性 | 8.2.2 |
| tensorboard | 2.18.0 | tensorboard-data-server（張量板數據伺服器） | 0.7.2 | TensorBoard 外掛程式分析工具 | 2.18.0 |
| tensorboardX | 2.6.2.2 | tensorflow | 2.18.0 | tensorflow-estimator | 2.15.0 |
| termcolor | 2.4.0 | 完成 | 0.17.1 | 文本 | 0.87.1 |
| tf_keras | 2.18.0 | thinc | 8.2.5 | threadpoolctl | 2.2.0 |
| tifffile | 2023.4.12 | tiktoken | 0.7.0 | tinycss2 | 1.2.1 |
| tokenize-rt | 4.2.1 | 詞元分詞器 | 0.20.0 | tomli | 2.0.1 |
| 火炬 | 2.5.0+cpu | torch-optimizer | 0.3.0 | torcheval | 0.0.7 |
| torchmetrics | 1.4.0.post0 | torchvision | 0.20.0+cpu | 龍捲風 | 6.4.1 |
| tqdm | 4.66.4 | 特性 | 5.14.3 | 變壓器 | 4.46.3 |
| typeguard | 4.3.0 | typer | 0.12.5 | types-protobuf | 3.20.3 |
| types-psutil | 5.9.0 | types-pytz | 2023.3.1.1 | types-PyYAML | 6.0.0 |
| 類型要求 | 2.31.0.0 | types-setuptools | 68.0.0.0 | 類型六 | 1.16.0 |
| types-urllib3 | 1.26.25.14 | typing_extensions | 4.11.0 | uc-micro-py | 1.0.1 |
| ujson | 5.10.0 | 無人看管自動升級 | 0.1 | URI 樣板 | 1.3.0 |
| urllib3 | 1.26.16 | 驗證工具 | 0.34.0 | virtualenv | 20.26.2 |
| 願景 | 0.7.5 | wadllib | 1.3.6 | 山葵 | 1.1.3 |
| wcwidth | 0.2.5 | 黃鼠狼 | 0.4.1 | 網頁顏色 | 24.8.0 |
| 網頁編碼格式 | 0.5.1 | websocket-client | 1.8.0 | websockets | 11.0.3 |
| Werkzeug | 3.0.3 | whatthepatch | 1.0.2 | 輪子 | 0.43.0 |
| 文字雲 | 1.9.3 | 包裹 | 1.14.1 | xgboost | 2.0.3 |
| xgboost-ray | 0.1.19 | xxhash | 3.4.1 | yapf | 0.33.0 |
| yarl | 1.9.3 | ydata 分析概況 | 4.9.0 | zipp | 3.17.0 |
| zstd | 1.5.5.1 |
GPU 叢集上的 Python 函式庫
注意
PyTorch 使用 CUDA PyPI 依賴性來提供 CUDA 支援，而非 Databricks Runtime 16.1 ML 內建的 CUDA 函式庫版本。
| 圖書館 | 版本 | 圖書館 | 版本 | 圖書館 | 版本 |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | 加速 | 1.1.1 | aiohttp | 3.9.5 |
| aiohttp-cors | 0.7.0 | aiosignal | 1.2.0 | 批注類型 | 0.7.0 |
| anyio | 4.2.0 | argcomplete | 3.5.0 | argon2-cffi | 21.3.0 |
| argon2-cffi-bindings | 21.2.0 | 箭 | 1.2.3 | 阿斯特 | 0.8.1 |
| asttokens | 2.0.5 | astunparse | 1.6.3 | async-lru | 2.0.4 |
| 屬性 (attrs) | 23.1.0 | audioread | 3.0.1 | 自動指令 | 2.2.2 |
| azure-core | 1.31.0 | azure-cosmos | 4.3.1 | azure-identity | 1.18.0 |
| Azure 儲存 Blob | 12.23.1 | Azure 儲存體檔案數據湖 (azure-storage-file-datalake) | 12.17.0 | 巴別塔 | 2.11.0 |
| 後退 | 2.2.1 | backports.tarfile | 1.2.0 | bcrypt | 3.2.0 |
| beautifulsoup4 | 4.12.3 | 黑 | 24.4.2 | 漂白 | 4.1.0 |
| 閃爍器 | 1.7.0 | 狂喜 | 0.7.11 | boto3 | 1.34.69 |
| botocore | 1.34.69 | Brotli | 1.0.9 | cachetools | 5.3.3 |
| 目錄 | 2.0.10 | category-encoders | 2.6.3 | certifi | 2024年6月2日 |
| cffi | 1.16.0 | chardet | 4.0.0 | 字符集正規化工具 (charset-normalizer) | 2.0.4 |
| 斷路器 | 2.0.0 | 點擊 | 8.1.7 | cloudpathlib | 0.19.0 |
| cloudpickle（雲端序列化工具） | 2.2.1 | cmdstanpy | 1.2.4 | 色彩繽紛 | 0.5.6 |
| colorlog | 6.8.2 | 通訊 | 0.2.1 | 作曲家 | 0.27.0 |
| 糖果 | 0.1.5 | configparser | 5.2.0 | contourpy | 1.2.0 |
| coolname | 2.2.0 | 密碼學 | 42.0.5 | 自行車手 | 0.11.0 |
| cymem | 2.0.10 | Cython | 3.0.11 | 英安岩 | 1.8.1 |
| databricks-automl-runtime | 0.2.21 | Databricks 特徵工程 | 0.7.0 | databricks-sdk | 0.30.0 |
| 數據集 | 3.1.0 | dbl-tempo | 0.1.26 | dbus-python | 1.3.2 |
| debugpy | 1.6.7 | 裝飾者 | 5.1.1 | deepspeed | 0.16.0 |
| defusedxml | 0.7.1 | 荒廢的 | 1.2.14 | 蒔蘿 | 0.3.8 |
| distlib | 0.3.8 | dm-tree | 0.1.8 | docstring-to-markdown（將 docstring 轉換為 markdown） | 0.11 |
| einops | 0.8.0 | 進入點 | 0.4 | 評價 | 0.4.3 |
| 執行 | 0.8.3 | 面向概覽 | 1.1.1 | Farama-Notifications | 0.0.4 |
| fastjsonschema | 2.21.1 | fasttext-wheel | 0.9.2 | 檔案鎖定 | 3.13.1 |
| flash_attn | 2.7.0 | 燒瓶 | 2.2.5 | flatbuffers | 24.3.25 |
| fonttools | 4.51.0 | fqdn | 1.5.1 | 凍結清單 | 1.4.0 |
| fsspec | 2023.5.0 | 未來 | 0.18.3 | gast | 0.4.0 |
| gitdb | 4.0.11 | GitPython | 3.1.37 | google-api-core | 2.20.0 |
| google-auth（Google 驗證） | 2.21.0 | google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.4.1 |
| google-cloud-storage (Google 雲端儲存) | 2.10.0 | google-crc32c | 1.6.0 | google-pasta | 0.2.0 |
| google-resumable-media | 2.7.2 | googleapis-common-protos | 1.65.0 | gql | 3.5.0 |
| graphql-core (GraphQL核心) | 3.2.4 | greenlet | 3.0.1 | grpcio | 1.60.0 |
| grpcio-status | 1.60.0 | gunicorn | 20.1.0 | gviz-api | 1.10.0 |
| 體育館 | 0.28.1 | h11 | 0.14.0 | h5py | 3.11.0 |
| hjson | 3.1.0 | 假期 | 0.54 | htmlmin | 0.1.12 |
| httpcore | 1.0.5 | httplib2 | 0.20.4 | httpx | 0.27.2 |
| huggingface-hub | 0.24.5 | idna | 3.7 | ImageHash | 4.3.1 |
| imageio | 2.33.1 | 不平衡學習 | 0.12.3 | importlib-metadata | 6.0.0 |
| importlib_resources | 6.4.5 | 變形 | 7.3.1 | ipyflow-core | 0.0.201 |
| ipykernel | 6.28.0 | ipython | 8.25.0 | ipython-genutils | 0.2.0 |
| ipywidgets | 7.7.2 | isodate | 0.6.1 | isoduration | 20.11.0 |
| itsdangerous | 2.2.0 | jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 |
| jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 | jedi | 0.19.1 |
| Jinja2 | 3.1.4 | jiter | 0.8.0 | jmespath | 1.0.1 |
| joblib | 1.4.2 | joblibspark | 0.5.1 | json5 | 0.9.6 |
| jsonpatch | 1.33 | jsonpointer | 3.0.0 | jsonschema | 4.19.2 |
| jsonschema-specifications | 2023年7月1日 | jupyter-events | 0.10.0 | jupyter-lsp | 2.2.0 |
| jupyter_client | 8.6.0 | jupyter_core | 5.7.2 | jupyter_server | 2.14.1 |
| jupyter_server_terminals | 0.4.4 | jupyterlab | 4.0.11 | jupyterlab-pygments | 0.1.2 |
| jupyterlab_server | 2.25.1 | keras | 3.6.0 | kiwisolver | 1.4.4 |
| langchain | 0.3.8 | langchain-core | 0.2.41 | langchain-text-splitters | 0.2.4 |
| langcodes | 3.4.1 | langsmith | 0.1.129 | language_data | 1.2.0 |
| launchpadlib | 1.11.0 | lazr.restfulclient | 0.14.6 | lazr.uri | 1.0.6 |
| lazy_loader | 0.4 | libclang | 15.0.6.1 | librosa | 0.10.2 |
| lightgbm | 4.5.0 | 閃電公用程式 | 0.11.9 | linkify-it-py | 2.0.0 |
| llvmlite | 0.42.0 | lz4 | 4.3.2 | Mako | 1.2.0 |
| marisa-trie | 1.2.0 | Markdown | 3.4.1 | markdown-it-py | 2.2.0 |
| MarkupSafe | 2.1.3 | matplotlib | 3.8.4 | matplotlib-inline | 0.1.6 |
| mccabe | 0.7.0 | mdit-py-plugins | 0.3.0 | mdurl | 0.1.0 |
| memray | 1.14.0 | mistune | 2.0.4 | ml-dtypes | 0.4.1 |
| mlflow-skinny | 2.15.1 | more-itertools | 10.3.0 | mosaicml-cli | 0.6.41 |
| 馬賽克機器學習串流 | 0.8.0 | mpmath | 1.3.0 | msal | 1.31.1 |
| msal-extensions | 1.2.0 | msgpack | 1.1.0 | multidict | 6.0.4 |
| 多方法 | 1.12 | 多重處理 | 0.70.16 | murmurhash | 1.0.11 |
| mypy | 1.10.0 | mypy-extensions | 1.0.0 | namex | 0.0.8 |
| nbclient | 0.8.0 | nbconvert | 7.10.0 | nbformat | 5.9.2 |
| nest-asyncio | 1.6.0 | networkx | 3.2.1 | 忍者 | 1.11.1.1 |
| nltk | 3.8.1 | nodeenv | 1.9.1 | 筆記本 | 7.0.8 |
| notebook_shim | 0.2.3 | numba | 0.59.1 | numpy | 1.26.4 |
| nvidia-cublas-cu12 | 12.4.5.8 | nvidia-cuda-cupti-cu12 | 12.4.127 | nvidia-cuda-nvrtc-cu12 | 12.4.127 |
| nvidia-cuda-runtime-cu12 | 12.4.127 | nvidia-cudnn-cu12 | 9.1.0.70 | nvidia-cufft-cu12 | 11.2.1.3 |
| nvidia-curand-cu12 | 10.3.5.147 | nvidia-cusolver-cu12 | 11.6.1.9 | nvidia-cusparse-cu12 | 12.3.1.170 |
| nvidia-ml-py | 12.560.30 | nvidia-nccl-cu12 | 2.21.5 | nvidia-nvjitlink-cu12 | 12.4.127 |
| nvidia-nvtx-cu12 | 12.4.127 | oauthlib | 3.2.0 | oci | 2.139.0 |
| openai | 1.55.1 | opencensus | 0.11.4 | opencensus-context | 0.1.3 |
| opentelemetry-api | 1.28.2 | opentelemetry-sdk | 1.28.2 | OpenTelemetry 語意規範（Semantic Conventions） | 0.49b2 |
| opt_einsum | 3.4.0 | optree | 0.12.1 | optuna | 3.6.1 |
| optuna-integration | 3.6.0 | orjson | 3.10.12 | 覆蓋 | 7.4.0 |
| 包裝 | 24.1 | 熊貓 | 1.5.3 | pandocfilters | 1.5.0 |
| paramiko | 3.4.0 | parso | 0.8.3 | pathspec | 0.10.3 |
| 替罪羊 | 0.5.6 | pexpect | 4.8.0 | phik | 0.12.4 |
| 枕頭 | 10.3.0 | 果仁 | 24.2 | platformdirs | 3.10.0 |
| plotly | 5.22.0 | 插入式 | 1.0.0 | pmdarima | 2.0.4 |
| 狗狗 | 1.8.2 | portalocker | 2.10.1 | preshed | 3.0.9 |
| prometheus-client | 0.14.1 | prompt-toolkit | 3.0.43 | 先知 | 1.1.5 |
| proto-plus | 1.24.0 | protobuf | 4.24.1 | psutil | 5.9.0 |
| psycopg2 | 2.9.3 | ptyprocess | 0.7.0 | pure-eval | 0.2.2 |
| py-cpuinfo | 9.0.0 | py-spy | 0.3.14 | pyarrow | 15.0.2 |
| pyarrow-熱修補 | 0.6 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
| pybind11 | 2.13.6 | pyccolo | 0.0.65 | pycparser | 2.21 |
| pydantic | 2.8.2 | pydantic_core | 2.20.1 | pyflakes | 3.2.0 |
| Pygments | 2.15.1 | PyGObject | 3.48.2 | PyJWT | 2.7.0 |
| PyNaCl | 1.5.0 | pyodbc | 5.0.1 | pyOpenSSL | 24.0.0 |
| pyparsing | 3.0.9 | pyright | 1.1.294 | pytesseract（Python 光學字符識別工具） | 0.3.10 |
| python-dateutil | 2.9.0.post0 | Python 編輯器 | 1.0.4 | python-json-logger | 2.0.7 |
| python-lsp-jsonrpc | 1.1.2 | python-lsp-server | 1.10.0 | python-snappy | 0.6.1 |
| pytoolconfig | 1.2.6 | pytorch-ranger | 0.1.1 | pytz | 2024.1 |
| PyWavelets | 1.5.0 | PyYAML | 6.0.1 | pyzmq | 25.1.2 |
| 問卷 | 1.10.0 | 射線 | 2.35.0 | 引用 | 0.30.2 |
| regex | 2023.10.3 | 要求 | 2.32.2 | requests-oauthlib | 1.3.1 |
| rfc3339-validator | 0.1.4 | rfc3986-validator | 0.1.1 | 富 | 13.3.5 |
| 繩 | 1.12.0 | rpds-py | 0.10.6 | rsa | 4.9 |
| ruamel.yaml | 0.18.6 | ruamel.yaml.clib | 0.2.8 | s3transfer | 0.10.2 |
| safetensors | 0.4.4 | scikit-image | 0.23.2 | scikit-learn | 1.4.2 |
| scipy | 1.13.1 | seaborn | 0.13.2 | Send2Trash | 1.8.2 |
| 句子轉換器 | 3.3.1 | sentencepiece | 0.2.0 | setuptools | 74.0.0 |
| 沙普 | 0.46.0 | shellingham | 1.5.4 | simplejson | 3.17.6 |
| 六 | 1.16.0 | 切片器 | 0.0.8 | smart-open | 5.2.1 |
| smmap | 5.0.0 | sniffio | 1.3.0 | 聲音檔案 | 0.12.1 |
| 湯濾網 | 2.5 | soxr | 0.5.0.post1 | spacy | 3.7.5 |
| spacy-legacy | 3.0.12 | spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.30 |
| sqlparse | 0.4.2 | 認真嗎 | 2.4.8 | ssh-import-id | 5.11 |
| 堆疊資料 | 0.2.0 | 斯坦尼歐 | 0.5.1 | statsmodels | 0.14.2 |
| sympy | 1.13.1 | 製表 | 0.9.0 | 糾纏的-up-in-unicode | 0.2.0 |
| 韌性 | 8.2.2 | tensorboard | 2.17.0 | tensorboard-data-server | 0.7.2 |
| tensorboard-plugin-profile | 2.18.0 | tensorboardX | 2.6.2.2 | TensorFlow | 2.17.0 |
| tensorflow-estimator | 2.15.0 | termcolor | 2.4.0 | 結束 | 0.17.1 |
| 文本 | 0.87.1 | tf_keras | 2.17.0 | thinc | 8.2.5 |
| threadpoolctl | 2.2.0 | tifffile | 2023年4月12日 | tiktoken | 0.7.0 |
| tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 | 分詞器 | 0.20.0 |
| tomli | 2.0.1 | 火炬 | 2.5.0+cu124 | torch-optimizer | 0.3.0 |
| torcheval | 0.0.7 | torchmetrics | 1.4.0.post0 | torchvision | 0.20.0+cu124 |
| 龍捲風 | 6.4.1 | tqdm | 4.66.4 | traitlets（程式庫） | 5.14.3 |
| 變壓器 | 4.46.3 | 氚核 | 3.1.0 | TypeGuard | 4.3.0 |
| typer | 0.14.0 | types-protobuf | 3.20.3 | types-psutil | 5.9.0 |
| types-pytz | 2023.3.1.1 | types-PyYAML | 6.0.0 | 類型-請求 | 2.31.0.0 |
| types-setuptools | 68.0.0.0 | 六類型 | 1.16.0 | types-urllib3 | 1.26.25.14 |
| typing_extensions | 4.11.0 | uc-micro-py | 1.0.1 | ujson | 5.10.0 |
| 自動升級 | 0.1 | URI範本 (uri-template) | 1.3.0 | urllib3 | 1.26.16 |
| 驗證者 | 0.34.0 | virtualenv | 20.26.2 | 願景 | 0.7.5 |
| wadllib | 1.3.6 | 山葵 | 1.1.3 | wcwidth | 0.2.5 |
| 黃鼠狼 | 0.4.1 | 網頁顏色 | 24.8.0 | 網路編碼 | 0.5.1 |
| websocket-client | 1.8.0 | websockets | 11.0.3 | Werkzeug | 3.0.3 |
| whatthepatch | 1.0.2 | 輪子 | 0.43.0 | 文字雲 | 1.9.3 |
| 包裹住 | 1.14.1 | xgboost | 2.0.3 | xgboost-ray | 0.1.19 |
| xxhash | 3.4.1 | yapf | 0.33.0 | yarl | 1.9.3 |
| ydata 分析 | 4.9.0 | zip | 3.17.0 | zstd | 1.5.5.1 |
R 函式庫
R 連結庫與 Databricks Runtime 16.1 中的 R 連結庫 相同。
Java 和 Scala 函式庫（Scala 2.12 叢集）
除了 Databricks Runtime 16.1 中的 Java 和 Scala 連結庫之外，Databricks Runtime 16.1 ML 還包含下列 JAR：
CPU 叢集
| 群組標識碼 | 成品標識碼 | 版本 |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-spark_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
GPU 叢集
| 群組標識碼 | 成品標識碼 | 版本 |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-gpu_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |