09-10-202143分下午
大家好。
我對磚過程需要手動上傳CSV文件的日常。
我想知道如果有一種方法可以導入這些數據(例如,熊貓在python中,)沒有必要每天上傳這個文件手動使用UI。
非常感謝。
09-10-202102:39點
您可以使用我們的DBFS REST API端點。注意,這個上傳數據,但你可能仍需要一個磚將數據加載到表的工作。
您還可以使用雲存儲的REST api或Python客戶機使用。
在原帖子查看解決方案
09-11-202101:50我
嗨,羅德裏戈
如果你使用Azure磚你也可以嚐試自動裝卸機這將上傳數據到一個火花dataframe或直接到熊貓的dataframe。請注意,你需要設置您的工作區進行必要的權限。
這裏更多信息的鏈接攝取CSV數據與汽車裝載機- Azure磚工作區|微軟文檔
學習快樂!
09-13-202106:57我
自動裝卸機確實是一個有效的選項,
或使用某種形式的ETL工具,獲取文件並把它在你的雲提供商,Azure數據工廠或AWS膠等。
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。