如何寫日誌條目從三角洲住表管道。

[159312年]

從一個筆記本我可以導入log4j日誌記錄器cs和寫日誌一樣:

log4jLogger = sc._jvm.org.apache.log4j

記錄器= log4jLogger.LogManager.getLogger (__name__)

LOGGER.info(“記錄器pyspark腳本初始化”)

但這並不表管道在三角洲工作生活。我想能夠發布調試消息管道運行時出現的日誌。我怎樣才能記錄器的DLT管道腳本?

[Kaniz]

嗨@Ben鮑嘉,每個管道的事件日誌存儲在一個三角洲DBFS表。您可以查看事件日誌條目在三角洲地區的生活表用戶界麵三角洲住表API,或者直接查詢δ表。

這文章重點是三角洲表查詢。

的例如筆記本電腦包括本文中討論的查詢,可以用來探索三角洲生活事件日誌表。

本文中的示例使用JSON SQL函數可以在磚運行時8.1或更高版本。

[159312年]

謝謝你Kaniz。我看過那篇文章,但它沒有解決如何寫日誌條目就是我努力的方向。

記錄自己的日誌消息將我直接寫“event_log_raw”?磚做引擎蓋下麵的是什麼?