Databricks Runtime 4.1 ML (EoS)
Notitie
Ondersteuning voor deze Databricks Runtime-versie is beëindigd. Zie de geschiedenis van einde van ondersteuning voor de einddatum van de ondersteuning. Zie de releaseversies en compatibiliteit van Databricks Runtime voor alle ondersteunde Databricks Runtime-versies.
Databricks Runtime 4.1 ML biedt een kant-en-klare omgeving voor machine learning en gegevenswetenschap. Het bevat meerdere populaire bibliotheken, waaronder TensorFlow, Keras en XGBoost. Het ondersteunt ook gedistribueerde TensorFlow-training met behulp van Horovod.
Notitie
Deze release is afgeschaft op 17 januari 2019. U wordt aangeraden een nieuwere versie van Databricks Runtime ML te gebruiken, afhankelijk van de bibliotheekversies die u wilt gebruiken.
Zie AI en machine learning op Databricks voor meer informatie, inclusief instructies voor het maken van een Databricks Runtime ML-cluster.
Notitie
Databricks Runtime ML-releases halen alle onderhoudsupdates op voor de databricks Runtime-basisrelease. Zie Onderhoudsupdates voor Databricks Runtime (gearchiveerd) voor een lijst met alle onderhoudsupdates.
Bibliotheken
Databricks Runtime 4.1 ML is gebouwd op Databricks Runtime 4.1. Zie de releaseopmerkingen voor Databricks Runtime 4.1 voor meer informatie over wat er nieuw is in Databricks Runtime 4.1 (EoS ). Naast de nieuwe functies in Databricks Runtime 4.1 bevat Databricks Runtime 4.1 ML de volgende bibliotheken ter ondersteuning van machine learning. Sommige hiervan zijn ook opgenomen in de databricks Runtime 4.1 basis en worden als zodanig vermeld.
Categorie | Bibliotheken |
---|---|
Gedistribueerde Deep Learning | Gedistribueerde training met Horovod en Spark: - HorovodEstimator - horovod 0.12.1 - openmpi 3.0.0 - paramiko 2.4.1 - cloudpickle 0.5.2 Gedistribueerde TensorFlow- en Keras-voorspelling: - spark-deep-learning 1.0 pre-release - tensorframes 0.3.0 |
Deep learning | [Keras]: - keras 2.1.5 - h5py 2.7.1 TensorFlow: - (CPU-clusters) tensorflow 1.7.1 - (GPU-clusters) tensorflow-gpu 1.7.1 GPU-bibliotheken : - CUDA 9.0 (ook geïnstalleerd in base Databricks Runtime) - cuDNN 7.0 (ook geïnstalleerd in databricks Runtime) - NCCL 2.0.5-3 |
XGBoost | - XGBoost4j 0.8-spark2.3-s_2.11 |
Andere machine learning-bibliotheken | - numpy 1.14.2 (ook geïnstalleerd in base Databricks Runtime; versie kan verschillen) - scikit-learn 0.18.1 (ook geïnstalleerd in base Databricks Runtime) - scipy (ook geïnstalleerd in base Databricks Runtime) |