Paralelizar o ajuste de hiperparâmetros Hyperopt
Nota
A versão de código aberto do Hyperopt não está mais sendo mantida.
O Hyperopt será removido na próxima versão principal do DBR ML. O Azure Databricks recomenda o uso do Optuna para uma experiência semelhante e acesso a algoritmos de ajuste de hiperparâmetros mais atualizados.
Este bloco de anotações mostra como usar o Hyperopt para paralelizar cálculos de ajuste de hiperparâmetros. Ele usa a SparkTrials
classe para distribuir automaticamente os cálculos entre os trabalhadores do cluster. Ele também ilustra o rastreamento automatizado de MLflow de execuções do Hyperopt para que você possa salvar os resultados para mais tarde.
Paralelize o ajuste de hiperparâmetros com o notebook automatizado de rastreamento MLflow
Depois de executar as ações na última célula do bloco de anotações, a interface do usuário do MLflow deve exibir: