火花豐富UI反向代理阻塞

[samst]

使用9.1毫升集群自動取款機也試了7.3和8.1。

磚是部署在穀歌的平台,我用的是審判。Beplay体育安卓版本

很難以調試,如果火花ui隻是半訪問。

導致原始html的一部分是可見的,但所有的css, js資產以及任何細節如果我公裏就業在ui中彈出受阻(403)。

302年https://dp - ....gcp.www.eheci.com/driver proxy/o/.../1007 - 074754 weeps90/41616/jobs/job?id=4&csrf=3...。。

403年https://dp - ....gcp.www.eheci.com/driver proxy/o/.../1007 - 074754 - weeps90/48884/proxy/local 163474460..。

403年https://dp - ....gcp.www.eheci.com/driver proxy/o/.../1007 - 074754 - weeps90/48884/proxy/local 163474460..。

(一切的背後reverseProxy / driver-proxy / o /…/ 1007 - 074754 weeps90/48884 /)

火花ui工作如果我終止集群並檢查它在集群或筆記本選項卡中。它的曆史服務器工作正常,但現場訪問代理不。oauth但我認為有一些問題我不能找到任何日誌告訴我403年發生的地方。

[samst]

謝謝你的回答。我隻是一個交互式運行集群和希望看到火花ui在側板,當我運行一個筆記本。

我希望它工作的方式考慮到UI(阻塞網址我可以看到chrome開發工具)和AWS是如何工作的。是,這是一個反相代理嗎https://github.com/google/inverting-proxy

但是如果你說我必須使用ssh。然後這樣的url

403年https://dp - ....gcp.www.eheci.com/driver proxy/o/.../1007 - 074754 - weeps90/48884/proxy/local 163474460..。

仍將打破。

我知道從AWS EMR火花deployements socks代理和一些foxyproxy chrome擴展配置可以工作,但我理解它在磚UI筆記本不會同意這個鏈接仍然會被打破。

我剛剛開始一個集群,附加一個筆記本,然後希望火花UI是可以達到的。我使用單一節點獨立也許這是問題。我會試著一個實際的多節點的線索。

[匿名]

@samst,我們一般不建議使用任何其他chrome插件再次為了安全目的,因為他們可能會收集一些信息從交通但工作使用火花發射通過讀取一個文本文件,然後做一個統計,我能夠訪問火花UI在另一個選項卡。附件是相同的截圖。所以火花豐富UI絕對不是阻塞。

[samst]

更新:我現在嚐試高並發性集群運行時10.1毫升。

我沒有時間atm調查所有的選擇但我猜spark-ui很簡單不是從事獨立的單節點集群或者是特定(9.1 lts運行時但我懷疑)。

這並不是說單一節點上相關的集群。

我有一個高並發10.1毫升集群運行這一個顯示所有ui無處不在。

[jose_gonzalez]

嗨@Samuel Stutz,

你還有這個問題嗎?

[samst]

這不是一個大問題了,但它仍然是。

工作標準和高並發集群有一個火花UI,

單節點集群。

我測試與運行時9.1和10.1。運行時並不重要。它可能是稍微不同的單節點集群的設置。

火花UI曆史服務器在任何情況下工作。

隻有互動單節點集群的問題,其他都很好。完成它的工作不是問題。

目前我的更大的問題是,沒有磚SQL和GCP的各自的儀表板。數據工程視圖和機器學習。