Databricks Runtime 14.0 för Machine Learning (EoS)
Anteckning
Stödet för den här Databricks Runtime-versionen har upphört. Information om slutdatumet för support finns i Historik över supportens slut. Alla Databricks Runtime-versioner som stöds finns i Databricks Runtime-versionsanteckningar och kompatibilitet.
Databricks Runtime 14.0 för Machine Learning ger en färdig miljö för maskininlärning och datavetenskap baserat på Databricks Runtime 14.0 (EoS). Databricks Runtime ML innehåller många populära maskininlärningsbibliotek, inklusive TensorFlow, PyTorch och XGBoost. Databricks Runtime ML innehåller AutoML, ett verktyg för att automatiskt träna maskininlärningspipelines. Databricks Runtime ML stöder även distribuerad djupinlärningsträning med Horovod.
Mer information, inklusive instruktioner för att skapa ett Databricks Runtime ML-kluster, finns i AI och maskininlärning på Databricks.
Nya funktioner och förbättringar
Databricks Runtime 14.0 ML bygger på Databricks Runtime 14.0. Information om nyheter i Databricks Runtime 14.0, inklusive Apache Spark MLlib och SparkR, finns i releasenoteringar för Databricks Runtime 14.0 (EoS).
Systemmiljö
Systemmiljön i Databricks Runtime 14.0 ML skiljer sig från Databricks Runtime 14.0 på följande sätt:
-
DBUtils: Databricks Runtime ML innehåller inte biblioteksverktyget (dbutils.library) (äldre).
Använd
%pipkommandon i stället. Se Notebook-specifika Python-bibliotek. - För GPU-kluster innehåller Databricks Runtime ML följande NVIDIA GPU-bibliotek:
- CUDA 11.8
- cuDNN 8.9.0.131-1
- NCCL 2.15.1
- TensorRT 8.5.3-1
Databricks Runtime 14.0 ML innehåller XGBoost 1.7.6, som inte stöder GPU-kluster med beräkningskapacitet 5.2 och lägre.
Följande paket som ingick i tidigare Databricks Runtime ML-versioner har tagits bort i Databricks Runtime 14.0 ML:
- miniconda
- MLeap
Bibliotek
I följande avsnitt visas de bibliotek som ingår i Databricks Runtime 14.0 ML som skiljer sig från de som ingår i Databricks Runtime 14.0.
I detta avsnitt:
- Bibliotek på den översta nivån
- Python-bibliotek
- R-bibliotek
- Java- och Scala-bibliotek (Scala 2.12-kluster)
Bibliotek på den översta nivån
Databricks Runtime 14.0 ML innehåller följande bibliotek på den översta nivån:
- GraphFrames
- Horovod och HorovodRunner
- MLflow
- PyTorch
- spark-tensorflow-connector
- TensorFlow
- TensorBoard
- Scikit-learn
Python-bibliotek
Databricks Runtime 14.0 ML använder Virtualenv för Python-pakethantering och innehåller många populära ML-paket.
Förutom de paket som anges i följande avsnitt innehåller Databricks Runtime 14.0 ML även följande paket:
- hyperopt 0.2.7+db4
- sparkdl 3.0.0_db1
- automl 1.21.1
Om du vill återskapa Databricks Runtime ML Python-miljön i din lokala virtuella Python-miljö laddar du ned filen requirements-14.0.txt och kör pip install -r requirements-14.0.txt. Det här kommandot installerar alla öppen källkod bibliotek som Databricks Runtime ML använder, men installerar inte bibliotek som utvecklats av Databricks, till exempel databricks-automl, databricks-feature-storeeller Databricks-förgreningen för hyperopt.
Python-bibliotek i CPU-kluster
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | accelerera | 0.21.0 | aiohttp | 3.8.5 |
| aiosignal | 1.3.1 | anyio | 3.5.0 | appdirs | 1.4.4 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindningar | 21.2.0 | Astor | 0.8.1 |
| asttokens | 2.0.5 | astunparse | 1.6.3 | async-timeout | 4.0.3 |
| attrs | 22.1.0 | audioread | 3.0.0 | azure-core | 1.29.1 |
| azure-cosmos | 4.3.1 | azure-storage-blob (Azure lagringsblob) | 12.17.0 | azure-storage-file-datalake | 12.12.0 |
| Backcall | 0.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.11.1 |
| svart | 22.6.0 | blekmedel | 4.1.0 | blinker | 1.4 |
| lycka | 0.7.10 | boto3 | 1.24.28 | botocore | 1.27.96 |
| cachetools | 5.3.1 | katalog | 2.0.9 | kategorikodare | 2.6.1 |
| certifi | 2022.12.7 | cffi | 1.15.1 | chardet | 4.0.0 |
| charset-normalizer | 2.0.4 | klicka | 8.0.4 | cloudpickle | 2.0.0 |
| cmdstanpy | 1.1.0 | Kommunikation | 0.1.2 | konfekt | 0.1.1 |
| configparser | 5.2.0 | contourpy | 1.0.5 | konvertera datum | 2.4.0 |
| kryptografi | 39.0.1 | cyklist | 0.11.0 | cymem | 2.0.7 |
| Cython | 0.29.32 | dacite | 1.8.1 | databricks-automl-runtime | 0.2.18 |
| databricks-cli | 0.17.7 | databricks-feature-store | 0.14.1 | databricks-sdk | 0.1.6 |
| dataclasses-json | 0.5.14 | datauppsättningar | 2.14.1 | dbl-tempo | 0.1.23 |
| dbus-python | 1.2.18 | debugpy | 1.6.7 | dekoratör | 5.1.1 |
| deepspeed | 0.10.0 | defusedxml | 0.7.1 | dill | 0.3.6 |
| diskcache | 5.6.1 | distlib | 0.3.7 | docstring-to-markdown | 0,11 |
| inträdespunkter | 0,4 | efem | 4.1.4 | utvärdera | 0.4.0 |
| Utför | 0.8.3 | översikt över aspekter | 1.1.1 | fastapi | 0.98.0 |
| fastjsonschema | 2.18.0 | snabbtext | 0.9.2 | filelock | 3.9.0 |
| flaska | 2.2.5 | flatbuffers | 23.5.26 | fonttools | 4.25.0 |
| frozenlist | 1.4.0 | fsspec | 2022.11.0 | framtid | 0.18.3 |
| Gast | 0.4.0 | GCC-körningsbibliotek | 1.10.0 | gitdb | 4.0.10 |
| GitPython | 3.1.27 | google-api-core | 2.11.1 | google-auth | 2.21.0 |
| google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.3.3 | Google molnlagring | 2.10.0 |
| google-crc32c | 1.5.0 | google-pasta | 0.2.0 | google-resumable-media | 2.5.0 |
| googleapis-common-protos | 1.60.0 | greenlet | 2.0.1 | grpcio | 1.48.2 |
| grpcio-status | 1.48.1 | gunicorn | 20.1.0 | gviz-api | 1.10.0 |
| h11 | 0.14.0 | h5py | 3.7.0 | hjson | 3.1.0 |
| ferier | 0,28 | horovod | 0.28.1 | htmlmin | 0.1.12 |
| httplib2 | 0.20.2 | httptools | 0.6.0 | huggingface-hub | 0.14.1 |
| idna | 3.4 | ImageHash | 4.3.1 | obalanserad inlärning | 0.10.1 |
| importlib-metadata | 4.11.3 | importlib-resources | 6.0.1 | ipykernel | 6.25.0 |
| ipython | 8.14.0 | ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 |
| isodate | 0.6.1 | itsdangerous | 2.0.1 | jedi | 0.18.1 |
| Jeepney | 0.7.1 | Jinja2 | 3.1.2 | jmespath | 0.10.0 |
| joblib | 1.2.0 | joblibspark | 0.5.1 | jsonschema | 4.17.3 |
| jupyter-klient | 7.3.4 | jupyter-server | 1.23.4 | jupyter_core | 5.2.0 |
| jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | keras | 2.13.1 |
| nyckelring | 23.5.0 | kiwisolver | 1.4.4 | langchain | 0.0.225 |
| langchainplus-sdk | 0.0.20 | språkkoder | 3.3.0 | launchpadlib | 1.10.16 |
| lazr.restfulclient | 0.14.4 | lazr.uri | 1.0.6 | lazy_loader | 0,3 |
| libclang | 15.0.6.1 | librosa | 0.10.0 | lightgbm | 3.3.5 |
| llvmlite | 0.39.1 | månkalender | 0.0.9 | lxml | 4.9.1 |
| Mako | 1.2.0 | Markdown | 3.4.1 | MarkupSafe | 2.1.1 |
| skumgodis | 3.20.1 | matplotlib | 3.7.0 | matplotlib-inline | 0.1.6 |
| Mccabe | 0.7.0 | felstämt | 0.8.4 | mlflow-skinny | 2.5.0 |
| more-itertools | 8.10.0 | mpmath | 1.2.1 | msgpack | 1.0.5 |
| multidict | 6.0.4 | multimetod | 1.9.1 | multiprocess | 0.70.14 |
| murmurhash | 1.0.9 | mypy-extensions | 0.4.3 | nbclassic | 0.5.2 |
| nbclient | 0.5.13 | nbconvert | 6.5.4 | nbformat | 5.7.0 |
| nest-asyncio | 1.5.6 | networkx | 2.8.4 | ninja | 1.11.1 |
| nltk | 3.7 | nodeenv | 1.8.0 | anteckningsbok | 6.5.2 |
| notebook_shim | 0.2.2 | numba | 0.56.4 | numexpr | 2.8.4 |
| numpy | 1.23.5 | oauthlib | 3.2.0 | openai | 0.27.8 |
| openapi-schema-pydantic | 1.2.4 | opt-einsum | 3.3.0 | emballage | 22,0 |
| Pandas | 1.5.3 | pandocfilter | 1.5.0 | paramiko | 2.9.2 |
| parso | 0.8.3 | pathspec | 0.10.3 | Pati | 0.10.2 |
| Patsy | 0.5.3 | petastorm | 0.12.1 | pexpect | 4.8.0 |
| phik | 0.12.3 | pickleshare | 0.7.5 | Kudde | 9.4.0 |
| pip | 22.3.1 | platformdirs | 2.5.2 | plotly | 5.9.0 |
| pluggy | 1.0.0 | pmdarima | 2.0.3 | Pooch | 1.4.0 |
| fördefinierad | 3.0.8 | prometheus-client | 0.14.1 | prompt-verktygslåda | 3.0.36 |
| profet | 1.1.4 | protobuf | 4.24.0 | psutil | 5.9.0 |
| psycopg2 | 2.9.3 | ptyprocess | 0.7.0 | pure-eval | 0.2.2 |
| py-cpuinfo | 9.0.0 | pyarrow | 8.0.0 | pyasn1 | 0.4.8 |
| pyasn1-modules | 0.2.8 | pybind11 | 2.11.1 | pycparser | 2.21 |
| pydantisk | 1.10.6 | pyflakes | 3.0.1 | Pygments | 2.11.2 |
| PyGObject | 3.42.1 | PyJWT | 2.3.0 | PyMeeus | 0.5.12 |
| PyNaCl | 1.5.0 | pyodbc | 4.0.32 | pyparsing | 3.0.9 |
| pyright | 1.1.294 | pyrsistent | 0.18.0 | pytesseract | 0.3.10 |
| python-dateutil | 2.8.2 | python-dotenv | 1.0.0 | python-editor | 1.0.4 |
| python-lsp-jsonrpc | 1.0.0 | python-lsp-server | 1.7.1 | pytoolconfig | 1.2.5 |
| pytz | 2022.7 | PyWavelets | 1.4.1 | PyYAML | 6,0 |
| pyzmq | 23.2.0 | regex | 2022.7.9 | begäranden | 2.28.1 |
| requests-oauthlib | 1.3.1 | Svaren | 0.18.0 | rep | 1.7.0 |
| RSA | 4,9 | s3transfer | 0.6.2 | safetensors | 0.3.2 |
| scikit-learn | 1.1.1 | seaborn | 0.12.2 | SecretStorage | 3.3.1 |
| Send2Trash | 1.8.0 | meningstransformatorer | 2.2.2 | meningsstycke | 0.1.99 |
| setuptools | 65.6.3 | Shap | 0.41.0 | simplejson | 3.17.6 |
| sex | 1.16.0 | Skivare | 0.0.7 | smart-open | 5.2.1 |
| smmap | 5.0.0 | sniffio | 1.2.0 | ljudfil | 0.12.1 |
| soupsieve | 2.3.2.post1 | soxr | 0.3.6 | spacy | 3.5.4 |
| spacy-legacy | 3.0.12 | spacy-loggers | 1.0.4 | spark-tensorflow-distributor | 1.0.0 |
| SQLAlchemy | 1.4.39 | sqlparse | 0.4.2 | seriöst | 2.4.7 |
| ssh-import-id | 5,11 | stack-data | 0.2.0 | starlette | 0.27.0 |
| statsmodels | 0.13.5 | sympy | 1.11.1 | Tabellform | 0.8.10 |
| trasslig upp-i-unicode | 0.2.0 | ihärdighet | 8.1.0 | tensorboard | 2.13.0 |
| tensorboard-data-server | 0.7.1 | tensorboard-plugin-profile | 2.13.0 | tensorflow-cpu | 2.13.0 |
| tensorflow-estimator | 2.13.0 | tensorflow-io-gcs-filesystem | 0.33.0 | termcolor | 2.3.0 |
| färdig | 0.17.1 | thinc | 8.1.12 | threadpoolctl | 2.2.0 |
| tiktoken | 0.4.0 | tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 |
| Tokeniserare | 0.13.3 | tomli | 2.0.1 | fackla | 2.0.1+cpu |
| torchvision | 0.15.2+cpu | tornado | 6.1 | tqdm | 4.64.1 |
| traitlets | 5.7.1 | Transformatorer | 4.31.0 | typeguard | 2.13.3 |
| typer | 0.9.0 | skriva-inspektera | 0.9.0 | typing_extensions | 4.4.0 |
| ujson | 5.4.0 | obevakade uppgraderingar | 0,1 | urllib3 | 1.26.14 |
| uvicorn | 0.23.2 | uvloop | 0.17.0 | virtualenv | 20.16.7 |
| Visioner | 0.7.5 | wadllib | 1.3.6 | Wasabi | 1.1.2 |
| övervakningsfiler | 0.19.0 | wcwidth | 0.2.5 | Webkodningar | 0.5.1 |
| websocket-client | 0.58.0 | websockets | 11.0.3 | Werkzeug | 2.2.2 |
| whatthepatch | 1.0.2 | hjul | 0.38.4 | widgetsnbextension | 3.6.1 |
| ordmoln | 1.9.2 | wrapt | 1.14.1 | xgboost | 1.7.6 |
| xxhash | 3.3.0 | yapf | 0.31.0 | Yarl | 1.9.2 |
| ydata-profiling | 4.2.0 | zipp | 3.11.0 |
Python-bibliotek i GPU-kluster
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | accelerera | 0.21.0 | aiohttp | 3.8.5 |
| aiosignal | 1.3.1 | anyio | 3.5.0 | appdirs | 1.4.4 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindningar | 21.2.0 | Astor | 0.8.1 |
| asttokens | 2.0.5 | astunparse | 1.6.3 | async-timeout | 4.0.3 |
| attrs | 22.1.0 | audioread | 3.0.0 | azure-core | 1.29.1 |
| azure-cosmos | 4.3.1 | azure-storage-blob | 12.17.0 | azure-storage-file-datalake | 12.12.0 |
| backcall | 0.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.11.1 |
| svart | 22.6.0 | blekmedel | 4.1.0 | blinker | 1.4 |
| lycka | 0.7.10 | boto3 | 1.24.28 | botocore | 1.27.96 |
| Verktyg för cachehantering | 5.3.1 | katalog | 2.0.9 | kategorikodare | 2.6.1 |
| certifi | 2022.12.7 | cffi | 1.15.1 | chardet | 4.0.0 |
| charset-normalizer | 2.0.4 | klicka | 8.0.4 | cloudpickle | 2.0.0 |
| cmake | 3.27.2 | cmdstanpy | 1.1.0 | Komm | 0.1.2 |
| konfekt | 0.1.1 | configparser | 5.2.0 | contourpy | 1.0.5 |
| konverteringsdatum | 2.4.0 | kryptografi | 39.0.1 | cyklist | 0.11.0 |
| cymem | 2.0.7 | Cython | 0.29.32 | dacite | 1.8.1 |
| databricks-automl-runtime | 0.2.18 | databricks-cli | 0.17.7 | databricks-feature-store | 0.14.1 |
| databricks-sdk | 0.1.6 | dataclasses-json | 0.5.14 | datauppsättningar | 2.14.1 |
| dbl-tempo | 0.1.23 | dbus-python | 1.2.18 | debugpy | 1.6.7 |
| dekoratör | 5.1.1 | deepspeed | 0.10.0 | defusedxml | 0.7.1 |
| dill | 0.3.6 | diskcache | 5.6.1 | distlib | 0.3.7 |
| docstring-to-markdown | 0,11 | einops | 0.6.1 | ingångspunkter | 0,4 |
| ephem | 4.1.4 | utvärdera | 0.4.0 | Utförande | 0.8.3 |
| översikt av aspekter | 1.1.1 | fastapi | 0.98.0 | fastjsonschema | 2.18.0 |
| snabbtext | 0.9.2 | filelock | 3.9.0 | flash-attn | 2.0.1 |
| Flask | 2.2.5 | flatbuffers | 23.5.26 | fonttools | 4.25.0 |
| frozenlist | 1.4.0 | fsspec | 2022.11.0 | framtid | 0.18.3 |
| Gast | 0.4.0 | GCC-körningsbibliotek | 1.10.0 | gitdb | 4.0.10 |
| GitPython | 3.1.27 | google-api-core | 2.11.1 | google-auth | 2.21.0 |
| google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.3.3 | google-cloud-storage | 2.10.0 |
| google-crc32c | 1.5.0 | Google-pasta | 0.2.0 | google-resumable-media | 2.5.0 |
| googleapis-common-protos | 1.60.0 | greenlet | 2.0.1 | grpcio | 1.48.2 |
| grpcio-status | 1.48.1 | gunicorn | 20.1.0 | gviz-api | 1.10.0 |
| h11 | 0.14.0 | h5py | 3.7.0 | hjson | 3.1.0 |
| ferier | 0,28 | horovod | 0.28.1 | htmlmin | 0.1.12 |
| httplib2 | 0.20.2 | httptools | 0.6.0 | huggingface-hub | 0.14.1 |
| idna | 3.4 | ImageHash | 4.3.1 | obalanserad inlärning | 0.10.1 |
| importlib-metadata | 4.11.3 | importlib-resources | 6.0.1 | ipykernel | 6.25.0 |
| ipython | 8.14.0 | ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 |
| isodate | 0.6.1 | itsdangerous | 2.0.1 | jedi | 0.18.1 |
| Jeepney (ett slags kollektivtrafikfordon i Filippinerna) | 0.7.1 | Jinja2 | 3.1.2 | jmespath | 0.10.0 |
| joblib | 1.2.0 | joblibspark | 0.5.1 | jsonschema | 4.17.3 |
| jupyter-client | 7.3.4 | jupyter-server | 1.23.4 | jupyter_core | 5.2.0 |
| jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | Keras | 2.13.1 |
| nyckelring | 23.5.0 | kiwisolver | 1.4.4 | langchain | 0.0.225 |
| langchainplus-sdk | 0.0.20 | språkkoder | 3.3.0 | launchpadlib | 1.10.16 |
| lazr.restfulclient | 0.14.4 | lazr.uri | 1.0.6 | lazy_loader | 0,3 |
| libclang | 15.0.6.1 | librosa | 0.10.0 | lightgbm | 3.3.5 |
| Lit | 16.0.6 | llvmlite | 0.39.1 | Månkalender | 0.0.9 |
| lxml | 4.9.1 | Mako | 1.2.0 | Markdown | 3.4.1 |
| MarkupSafe | 2.1.1 | skumgodis | 3.20.1 | matplotlib | 3.7.0 |
| matplotlib-inline | 0.1.6 | Mccabe | 0.7.0 | felstämt | 0.8.4 |
| mlflow-skinny | 2.5.0 | more-itertools | 8.10.0 | mpmath | 1.2.1 |
| msgpack | 1.0.5 | multidict | 6.0.4 | multimetod | 1.9.1 |
| multiprocess | 0.70.14 | murmurhash | 1.0.9 | mypy-extensions | 0.4.3 |
| nbclassic | 0.5.2 | nbclient | 0.5.13 | nbconvert | 6.5.4 |
| nbformat | 5.7.0 | nest-asyncio | 1.5.6 | networkx | 2.8.4 |
| ninja | 1.11.1 | nltk | 3.7 | nodeenv | 1.8.0 |
| anteckningsbok | 6.5.2 | notebook_shim | 0.2.2 | numba | 0.56.4 |
| numexpr | 2.8.4 | numpy | 1.23.5 | oauthlib | 3.2.0 |
| openai | 0.27.8 | openapi-schema-pydantic | 1.2.4 | opt-einsum | 3.3.0 |
| emballage | 22,0 | Pandas | 1.5.3 | pandocfilters | 1.5.0 |
| paramiko | 2.9.2 | parso | 0.8.3 | pathspec | 0.10.3 |
| pati | 0.10.2 | Patsy | 0.5.3 | petastorm | 0.12.1 |
| pexpect | 4.8.0 | phik | 0.12.3 | pickleshare | 0.7.5 |
| Kudde | 9.4.0 | pip | 22.3.1 | platformdirs | 2.5.2 |
| plotly | 5.9.0 | pluggy | 1.0.0 | pmdarima | 2.0.3 |
| Pooch | 1.4.0 | förfälld | 3.0.8 | prompt-toolkit | 3.0.36 |
| profet | 1.1.4 | protobuf | 4.24.0 | psutil | 5.9.0 |
| psycopg2 | 2.9.3 | ptyprocess | 0.7.0 | pure-eval | 0.2.2 |
| py-cpuinfo | 9.0.0 | pyarrow | 8.0.0 | pyasn1 | 0.4.8 |
| pyasn1-modules | 0.2.8 | pybind11 | 2.11.1 | pycparser | 2.21 |
| pydantisk | 1.10.6 | pyflakes | 3.0.1 | Pygments | 2.11.2 |
| PyGObject | 3.42.1 | PyJWT | 2.3.0 | PyMeeus | 0.5.12 |
| PyNaCl | 1.5.0 | pyodbc | 4.0.32 | pyparsing | 3.0.9 |
| pyright | 1.1.294 | pyrsistent | 0.18.0 | pytesseract | 0.3.10 |
| python-dateutil | 2.8.2 | python-dotenv | 1.0.0 | python-editor | 1.0.4 |
| python-lsp-jsonrpc | 1.0.0 | python-lsp-server | 1.7.1 | pytoolconfig | 1.2.5 |
| pytz | 2022.7 | PyWavelets | 1.4.1 | PyYAML | 6,0 |
| pyzmq | 23.2.0 | regex | 2022.7.9 | begäranden | 2.28.1 |
| requests-oauthlib | 1.3.1 | Svaren | 0.18.0 | rep | 1.7.0 |
| RSA | 4,9 | s3transfer | 0.6.2 | safetensors | 0.3.2 |
| scikit-learn | 1.1.1 | seaborn | 0.12.2 | SecretStorage | 3.3.1 |
| Send2Trash | 1.8.0 | meningstransformatorer | 2.2.2 | meningsstycke | 0.1.99 |
| setuptools | 65.6.3 | Shap | 0.41.0 | simplejson | 3.17.6 |
| sex | 1.16.0 | Skärare | 0.0.7 | smart-open | 5.2.1 |
| smmap | 5.0.0 | sniffio | 1.2.0 | ljudfil | 0.12.1 |
| soupsieve | 2.3.2.post1 | soxr | 0.3.6 | rymlig | 3.5.4 |
| spacy-legacy | 3.0.12 | spacy-loggers | 1.0.4 | spark-tensorflow-distributor | 1.0.0 |
| SQLAlchemy | 1.4.39 | sqlparse | 0.4.2 | seriöst | 2.4.7 |
| ssh-import-id | 5,11 | stack-data | 0.2.0 | starlette | 0.27.0 |
| statsmodels | 0.13.5 | sympy | 1.11.1 | Tabellform | 0.8.10 |
| intrasslad i Unicode | 0.2.0 | uthållighet | 8.1.0 | tensorboard | 2.13.0 |
| tensorboard-data-server | 0.7.1 | tensorboard-plugin-profile | 2.13.0 | tensorflow | 2.13.0 |
| tensorflow-estimator | 2.13.0 | tensorflow-io-gcs-filesystem | 0.33.0 | termcolor | 2.3.0 |
| färdig | 0.17.1 | thinc | 8.1.12 | threadpoolctl | 2.2.0 |
| tiktoken | 0.4.0 | tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 |
| tokeniser | 0.13.3 | tomli | 2.0.1 | fackla | 2.0.1+cu118 |
| torchvision | 0.15.2+cu118 | tornado | 6.1 | tqdm | 4.64.1 |
| traitlets | 5.7.1 | Transformatorer | 4.31.0 | Triton | 2.0.0 |
| typeguard | 2.13.3 | typer | 0.9.0 | skriva-inspektera | 0.9.0 |
| typing_extensions | 4.4.0 | ujson | 5.4.0 | obevakade uppgraderingar | 0,1 |
| urllib3 | 1.26.14 | uvicorn | 0.23.2 | uvloop | 0.17.0 |
| virtualenv | 20.16.7 | Visioner | 0.7.5 | wadllib | 1.3.6 |
| Wasabi | 1.1.2 | övervakningsfiler | 0.19.0 | wcwidth | 0.2.5 |
| webkodningar | 0.5.1 | websocket-klient | 0.58.0 | websockets | 11.0.3 |
| Werkzeug | 2.2.2 | whatthepatch | 1.0.2 | hjul | 0.38.4 |
| widgetsnbextension | 3.6.1 | ordmoln | 1.9.2 | wrapt | 1.14.1 |
| xgboost | 1.7.6 | xxhash | 3.3.0 | yapf | 0.31.0 |
| jarl | 1.9.2 | ydata-profilering | 4.2.0 | blixtlås | 3.11.0 |
R-bibliotek
R-biblioteken är identiska med R-biblioteken i Databricks Runtime 14.0.
Java- och Scala-bibliotek (Scala 2.12-kluster)
Förutom Java- och Scala-bibliotek i Databricks Runtime 14.0 innehåller Databricks Runtime 14.0 ML följande JAR:er:
CPU-kluster
| Grupp Id | Artefakt-ID | Version |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-spark_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.2-db2-spark3.4 |
| org.mlflow | mlflow-client | 2.5.0 |
| org.scala-lang.modules | scala-java8-compat_2.12 | 0.8.0 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
GPU-kluster
| Grupp-ID | Artefakt-ID | Version |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-gpu_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.2-db2-spark3.4 |
| org.mlflow | mlflow-client | 2.5.0 |
| org.scala-lang.modules | scala-java8-compat_2.12 | 0.8.0 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |