HyperOPT因MaxNumConcurrentTasks錯誤而失敗

請勿將HyperOPT安裝在Databricks運行時,以進行機器學習群集。

寫的Chetan.Kardekar

上次出版於:2022年5月16日

問題

您正在使用使用機器學習參數hyperopt當您的工作失敗時py4j.py4jexception:MaxNumConcurrentTasks([])不存在錯誤。

您正在使用Databricks運行時進行機器學習(Databricks Runtime ML)群集。

原因

Databricks運行時ML具有兼容版本的HyperOPT預裝(AWS|天藍色|GCP)。

如果您手動安裝第二版HyperOPT,則會引起衝突。

解決方案

請勿在Databricks運行時ML簇上安裝HyperOPT。