Paralelización del ajuste de hiperparámetros de Hyperopt
Nota:
La versión de código abierto de Hyperopt ya no se mantiene.
Hyperopt se quitará en la siguiente versión principal de DBR ML. Azure Databricks recomienda usar Optuna para obtener una experiencia similar y acceder a algoritmos de ajuste de hiperparámetros más actualizados.
En este cuaderno se muestra cómo usar Hyperopt para paralelizar los cálculos de ajuste de hiperparámetros. Se usa la clase SparkTrials
para distribuir automáticamente los cálculos entre los trabajadores del clúster. También se muestra el seguimiento automatizado de MLflow para las ejecuciones de Hyperopt, de modo que pueda guardar los resultados para más adelante.
Paralelización del ajuste de hiperparámetros con el cuaderno de seguimiento de MLflow automatizado
Después de llevar a cabo las acciones en la última celda del cuaderno, la interfaz de usuario de MLflow debe mostrar esto: