原创 Hadoop-2.2.0 + hbase-0.98.4-hadoop2 RedHat x64 僞分佈式安裝小札(及配置文件)

64位32位一旦有了Hadoop-2.2.0的 x64位包就都是一樣一樣的了~ 找到一個LONG同學的包分享在此: pan.baidu.com/s/1ntlupaL 記錄一些安裝過程中遇到的問題 HADOOP-2.2.0 安裝過程:

原创 python 執行 hadoop-2.2.0 mapreduce

簡單記錄一下 需求大概是把一類文本格式轉換成另外一類文本格式,轉換前是 如下這樣: 1.245.152.25 [2,4,12,17,888,15334,23,6] 1.245.152.250 [2,4,11,37,814,33374

原创 Linux 查找文件 查看.jar包

find -name xxx.jar 即可 jar tvf xx.jar 即可

原创 python第一彈 爬蟲淘女郎圖片

第一次看到  http://bbs.byr.cn/#!article/Python/1859?p=1&au=lc10210103 看他說的很容易的樣子就果斷試一試了確實很簡單,代碼如下: # -*- coding: utf-8 -*-

原创 2020年Q1小結

2020年一季度整體過完了,用XMind ZEN畫了個簡要的思維導圖小結一下。 1.工作 疫情以來承擔了越來越多的工作,凡是和物流沾邊的JW就往我頭上安,提心吊膽的跟進架構改造、兼顧操心統計分析、加上各種歷史奇奇怪怪的故障、物流

原创 常見查看LINUX配置命令

下面給除了各linux發行版比較常用的系統信息查詢的命令, 大家可以參考, 同時也可以測試學習, 必要的時候man, 一定要學學使用man命令, 呵呵 # uname -a # 查看內核/操作系統/CPU信息 # head -n 1 /

原创 修改 Redhat enterprise linux 5 root 密碼方法

留一個鏈接在這裏 wenku.baidu.com/link?url=ewj1hvXbiy1GcHd_yTkfZHVihK9_wOy7nFFezKo7rOQGsg9q7p_4TleX4t7sKYKnkjlj6zmZ5bryxQgzY

原创 【爛尾】RedHat Linux 5 x64 安裝 Hadoop-2.2.0

編譯過程於中秋前就開始了,最終爛尾呃... 今天打算編譯的時候找到這個人的博客 blog.csdn.net/long1657/article/details/22314647 ,並獲取到其給出的編譯好的 x64 hadoop安裝包pan

原创 我的2019年終總結

2019年終總結一、關於工作a.做了一些事b.反思c.改進二、關於生活a.我結婚啦b.學習c.雜七雜八三、新年寄語 FLAG立起來 2019年馬上就要結束了,作爲年齡最大的“90後”,也已經在以肉眼可見的速度奔往而立之年了,踩着2

原创 Ubuntu U盤格式化

試圖在非聯網主機上安裝些東西,但是發現Red Hat Enterprise Linux 5 不能識別 NTFS 格式硬盤,所以內容打不開,於是考慮格式化U盤成FAT先。 (1)查看分區,定位到格式化U盤位置     首先查看 U盤分區,

原创 Hbase 開啓關閉遇到的一些問題記錄 HregionServer 進程關不掉

    事情的起因是這樣的,因爲使用網上找的一個命令希望可以從 Hbase 表中截取一部分(依據時間戳的情況間隔)出來做實驗,但是命令敲近來總是報錯,顯示"security.UserGroupInformation:Priviledged

原创 RedHat 64位 eclipse 環境使用

問題1:安裝 eclipse 開啓的時候報如下錯:(JVM terminated. Exit code=13) 解決1:發現是 java 版本號不一致的問題 java是x86的,於是重新下載 jdk-7u67-linux-x64.gz

原创 Hadoop-2.2.0 wordcount 編譯打包執行 (java.lang.ClassNotFoundException)

安裝好 HADOOP+HBASE 於是開始在403準備試試好不好用然後做實驗~萬能的 wordcound 我來了~ 1、mywordcound.java 書寫 主要是從網上抄了來,據說 eclipse 不支持 hadoop-2.2.0

原创 Mahout安裝嘗試

參考 blog.csdn.net/xqj198404/article/details/28601149 一、Mahout0.9安裝 1、首先 從mirror.cc.columbia.edu/pub/software/apache/m

原创 Hbase org.apache.hadoop.mapreduce.Export 錯誤(PriviledgedActionException File dose not exist)

今天嘗試從 hbase 表裏面導出一部分數據來進行試驗的事情,就是如下這句命令: ./hbase org.apache.hadoop.hbase.mapreduce.Export test /test_hbase_exporttest