取消
顯示的結果
而不是尋找
你的意思是:

的最好方法是使用hyperopt訓練火花。和mlflow ml模式和自動跟蹤嗎?

User16752240150
新的貢獻者二世

我讀了這本書文章涵蓋:

  • 使用CrossValidator或TrainValidationSplit跟蹤hyperparameter調優(沒有hyperopt)。隻有隨機/網格搜索
  • 平行的“單機”模型訓練和使用hyperopt hyperopt。SparkTrials(不是spark.ml)
  • “分布式訓練和Hyperopt HorovodRunner”——分布式深度學習Hyperopt(沒有MLFlow)
    • 它提到“HorovodRunner,你不使用SparkTrials類,和您必須手動調用MLflow Hyperopt測井試驗。”

有一個例子筆記本顯示如何hyperparameter優化火花。毫升模型和對數hyperparams /標準/工件?

1回複1

sean_owen
尊敬的貢獻者二世
尊敬的貢獻者二世

其實很簡單:使用hyperopt,但使用“試驗”而不是“SparkTrials”。並行性的火花,而不是優化過程。

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map