Python連接大數據平臺HDFS傳輸文件

Python連接大數據平臺HDFS傳輸文件

一、Python連接大數據平臺HDFS傳輸文件:

1、實現代碼如下:

import hdfs

hdfs_ip = "ip:50070"

try:
    client = hdfs.Client(hdfs_ip)
    //上傳前hdfs指定路徑下文件列表
    print(client.list("hdfs完整路徑"))
    client.upload('hdfs完整路徑', '本地目錄/文件名.csv')
    //上傳後hdfs指定路徑下文件列表,驗證是否上傳成功
    print(client.list("hdfs完整路徑"))
except Exception as e:
    print(e)

溫馨提示:
本人聯繫方式:
QQ:961094233
郵箱:[email protected]

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章