@Deepak Bhatt:
是的,你可以寫你PySpark代碼模塊化的Python文件之外的磚,然後叫他們從磚的筆記本。這裏是您可以遵循的步驟:
進口my_pyspark_code
調用的Python文件中主要功能數據磚筆記本。例如,如果您的主要功能是叫run_spark_job()你可以叫它是這樣的:
my_pyspark_code.run_spark_job ()
遵循這些步驟,您可以編寫PySpark代碼模塊化和可維護的方式以外的磚,然後輕鬆地稱之為從磚的筆記本。
@Deepak Bhatt:
是的,你可以寫你PySpark代碼模塊化的Python文件之外的磚,然後叫他們從磚的筆記本。這裏是您可以遵循的步驟:
進口my_pyspark_code
調用的Python文件中主要功能數據磚筆記本。例如,如果您的主要功能是叫run_spark_job()你可以叫它是這樣的:
my_pyspark_code.run_spark_job ()
遵循這些步驟,您可以編寫PySpark代碼模塊化和可維護的方式以外的磚,然後輕鬆地稱之為從磚的筆記本。