pyspark.resource.ExecutorResourceRequests

pyspark.resource。 ExecutorResourceRequests ( _jvm:可選(py4j.java_gateway.JVMView]=沒有一個,_request:可選(Dict(str,pyspark.resource.requests.ExecutorResourceRequest]]=沒有一個 )

一組執行人資源請求。這是一起使用的pyspark.resource.ResourceProfileBuilder以編程方式指定一個抽樣所需的資源將被應用在舞台上水平。

筆記

這個API是不斷發展的。

方法

(數量)

內存(數量)

memoryOverhead(數量)

offheapMemory(數量)

pysparkMemory(數量)

資源(resourceName, […])

屬性

請求