Python連接大數據平臺HDFS傳輸文件
一、Python連接大數據平臺HDFS傳輸文件:
1、實現代碼如下:
import hdfs
hdfs_ip = "ip:50070"
try:
client = hdfs.Client(hdfs_ip)
//上傳前hdfs指定路徑下文件列表
print(client.list("hdfs完整路徑"))
client.upload('hdfs完整路徑', '本地目錄/文件名.csv')
//上傳後hdfs指定路徑下文件列表,驗證是否上傳成功
print(client.list("hdfs完整路徑"))
except Exception as e:
print(e)
溫馨提示:
本人聯繫方式:
QQ:961094233
郵箱:[email protected]