高並發集群隻是分裂用戶之間資源更均勻。所以當4個人筆記本電腦運行在同一時間在集群與4個cpu可以想象,每一個cpu。
在標準集群1人可以利用所有工人cpu作為你的工作有多個分區(例如4)所以需要多核cpu進程(1 1一次分區所有4 cpu將很忙處理4分區)所以其他用戶的工作隊列中等待,直到你的工作完成。
在集群標準還可以維護資源配置在筆記本級別使用池。設置sparkContext屬性在筆記本的第一行:
spark.sparkContext.setLocalProperty (“spark.scheduler。池”、“pool1”)
高並發集群隻是分裂用戶之間資源更均勻。所以當4個人筆記本電腦運行在同一時間在集群與4個cpu可以想象,每一個cpu。
在標準集群1人可以利用所有工人cpu作為你的工作有多個分區(例如4)所以需要多核cpu進程(1 1一次分區所有4 cpu將很忙處理4分區)所以其他用戶的工作隊列中等待,直到你的工作完成。
在集群標準還可以維護資源配置在筆記本級別使用池。設置sparkContext屬性在筆記本的第一行:
spark.sparkContext.setLocalProperty (“spark.scheduler。池”、“pool1”)
感謝你您的回複。現在更有意義。