原创 其他節點能對hive做操作,只有一個節點操作hive時報:無法實例化

其他節點能對hive做操作,只有一個節點操作hive報無法實例化 今天裝hive的時候結點1可以正常查看數據庫,節點3也能正常查看數據庫,就節點2查看數據庫時報:無法實例化 問題 好傢伙給我愁壞了,我尋思我node02節點的hi

原创 MapReduce一次讀取多個文件

MapReduce一次讀取多個文件 求出每一行數據所在的文件名 學習目標(獲取數據所在文件的名稱) 主要還是map中的改變 在map中通過context調用getInputSplit()這個方法,再將此對象強轉爲FileSplit

原创 MapReduce使用壓縮算法對計算完畢的數據進行壓縮

MapReduce使用壓縮算法對計算完畢的數據進行壓縮 查看Hadoop支持的壓縮格式 Hadoop的路徑/bin/hadoop checknative Hadoop支持的壓縮算法 壓縮格式 工具 算法 文件擴展名 是否可切