你好,
我們使用磚運行時版本11.3 lts和執行一個火花Java集群工作使用的工作。自動化的執行這一工作,我們需要定義(從bash配置源文件)一些環境變量通過一個init腳本(集群級)並使其可用於Java工作的火花。
在這樣做的同時,我們意識到我們不能上傳一個init腳本的大小大於5 kb在適當的DBFS位置。顯然文檔指出init腳本的大小不應超過64 kb。在工作區中有設置/配置水平,可以幫助我們提高這個限製從5 kb到64 kb嗎?
請讓我們知道如果我們丟失的任何東西。任何幫助在這方麵將高度讚賞。
提前謝謝!
問候,
/ /拉胡爾
