單節點集群工作但多節點集群不讀取數據。

[TheDataDexter]

我目前使用VNET注入磚工作區。目前我已經安裝一個ADLS G2的磚集群的資源。

筆記本在單個節點上運行時,讀取、轉換和寫入數據我們沒有遇到任何問題。然而,當我運行相同的筆記本在工作一個多節點集群的火花進入無限等待階段。

時深入火花集群UI我發現一個活躍的階段:”NativeMethodAccessorImpl的負載。java: 0(2.0)階段”。當舞台頁麵我們得到一個403錯誤,無效或失蹤CSRF令牌。

有趣的是,出於測試目的,我們部署一個磚工作區沒有VNET注入。我們利用多節點集群沒有任何問題。

[werners1 · Accepted solution]

可能你的白名單防火牆ip範圍嗎?錯誤的CIDR-interval ?

每個音符都有一個單獨的ip地址,所以如果沒有正確配置防火牆,節點無法溝通。

[Kaniz]

嗨@Derrick Bakhuis, @Werner Stinckens的回複回答查詢?

[TheDataDexter]

@Werner Stinckens謝謝你的回複。今天我將看看netwerk配置。