如何從網上獲取數據擦到你的數據存儲

[克裏斯]

我學習數據磚後第一次書文案人員2020年所以我想象它可能有點過時。我要做的是將數據從一個在線來源(在這種特定情況下使用shell腳本使用python)但是我想做數據存儲,以便我可以使用它在工作流程。附件是這本書給出的代碼。一切都運行得很好,但當我去添加數據使用DBFS方法數據不存在。有另一種方法做這個嗎?我設置在Azure和設置我的數據存儲為hive_metastore默認數據庫。現在把它在這裏很好。我有附加.dbc文件。我希望有幫助。如果沒有,我可以附加其他東西。 This is my first time here. I have to figure out how to change this stuff later. Thank you in advance.

[etsyal1e2r3]

你可以做一個,寫文件的本地存儲,但其推薦設置外部位置來存儲文件和表在自己的雲存儲管理。但是現在試試這個…

dbutils.fs.put (“< your_file >”、“< /你/想要/路徑>”)

如果你有任何問題,請讓我知道。當你開始建立外部位置和沒有幫助你,請讓我知道。

[Vidula_Khanna]

嗨@Chris Sarrico

謝謝你發布你的問題在我們的社區!我們很高興幫助你。

幫助我們為您提供最準確的信息,請您花一些時間來回顧反應和選擇一個最好的回答了你的問題嗎?

這也將有助於其他社區成員可能也有類似的問題在未來。謝謝你的參與,讓我們知道如果你需要任何進一步的援助!

[克裏斯]

響應是在半夜我沒有嚐試的機會。不,我沒有成功。我把我的理想路徑“hive_metastore”。“默認”有反應好但文件再也沒有出現。這反應也沒有工作。似乎數據磚需要一些實際的培訓視頻或體麵的文檔如何做事。我需要能夠訪問數據。請幫助。

[etsyal1e2r3]

該文件不會出現在blob直到你設置外部位置和使用刺blob路徑寫/意圖filea。用力推蜂巢metastore隻是內部磚工作區。設置一個了嗎?讓我知道。