我將我從磚的S3 bucket。
使用下麵的命令:
進口urllib
進口urllib.parse
ACCESS_KEY = "測試"
SECRET_KEY = "測試"
ENCODED_SECRET_KEY = urllib.parse。報價(SECRET_KEY”、“) AWS_BUCKET_NAME =“測試”MOUNT_NAME = dbutils.fs“S3_Connection_details”。山(“s3n: / / % s: % s@ % s % (ACCESS_KEY, ENCODED_SECRET_KEY AWS_BUCKET_NAME)“/ mnt / % s”% MOUNT_NAME)
當我運行下麵的命令,我得到的csv文件列表出現在桶裏。
顯示器(dbutils.fs.ls (“/ mnt / S3_Connection”))
如果有10個文件,我想創建10個不同的表在postgreSQL讀完csv文件。我不需要任何轉換。它是可行的嗎?
首先,如何創建一個dataframe使用csv文件之一。如果有人能幫我的語法。
問候,
阿卡什