原创 Kafka Manager安裝筆記
1、下載已經編譯好的kafka-manager-1.0-SNAPSHOT.zip 百度網盤：http://pan.baidu.com/s/1i349zet 密碼：9vfk 2、解壓到指定的安裝目錄：unzip kafka-manage
2020-06-22 00:16:51
原创 RocketMQ使用筆記
1、將alibaba-rocketmq-3.2.2.tar.gz解壓 2、設置/app/alibaba-rocketmq/bin目錄下執行腳本的權限:chmod +x ./bin/*.sh 3、啓動nameserver（192.168.2
2020-06-22 00:16:51
原创 Storm學習筆記二
主要內容：通過spout讀取文件中的內容，然後分別以兩個bolt來處理 package com.panguoyuan.storm.lession2; import backtype.storm.Config; import backty
2020-02-27 09:49:26
原创 Storm啓動異常[ERROR] Error when processing event，Supervisor啓不來
當storm服務非正常終止（如關機沒關虛擬機，或機器斷電）時，下次再啓動storm時會報如下錯誤 2015-03-28 02:26:08 b.s.d.supervisor [INFO] Starting supervisor with i
2020-02-27 09:49:26
原创 基於Mahout的圖書推薦系統
一、 用Maven搭建Mahout的開發環境 package com.panguoyuan.mahout.itemcf; import java.
2020-02-27 09:49:26
原创 linux命令運維彙總
1.Binary file (standard input) matches 用grep "search word" log.txt linux系統認爲是二進制文件，需要在搜索詞前加上-a，如：grep -a "search word"
2020-02-27 09:49:26
1
原创 windows-7-64下memcached的安裝測試
1.下載memcached-win64-1.4.4-14.zip安裝包 2.解壓到指定的安裝目錄 3.以管理員的身份運行cmd命令(注意，一定是管理員身份，要不然會報報莫名其妙的錯) 4.Java客戶端訪問，默認端口是11211 pa
2020-02-27 09:49:26
原创 Storm學習筆記一
1.先生成數據源 package com.panguoyuan.storm.lession1; import java.io.File; import java.io.FileOutputStream; import java.io.
2020-02-27 09:49:26
原创 Kafka監控工具KafkaOffsetMonitor
1.下載KafkaOffsetMonitor-assembly-0.2.0.jar 網盤地址：http://pan.baidu.com/s/1eQgYZOA 密碼：rd5y 2.在服務器上創建kafka-offset-console目錄
2020-02-27 09:49:26
原创 Flume使用筆記
1、當一臺機器運行多個flume腳本，時執行:ps -aux|grep flume會輸出很多個進程出來，且當本地的環境變量配置很多時（如：Hadoop，Hbase...），此時會在控制檯打印很多JVM加載的依賴，沒辦法看哪個進程運行了哪個
2020-02-27 09:49:26
2
原创 Spark集羣基於Zookeeper的HA搭建部署筆記
1.環境介紹 （1）操作系統RHEL6.2-64 （2）兩個節點：spark1(192.168.232.147),spark2(192.168.23
2020-02-27 09:49:26
原创 hadoop配置好之後啓服務，jps能看到datanode進程，可是後臺的datanode日誌有如下錯誤，且50070端口上也是沒有活的節點
2015-04-22 14:17:29,908 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: For namenode master/192.168.1.100:53310 u
2020-02-27 09:49:26
3
原创 JavaAPI訪問Hadoop2.2HA的配置下訪問Hbase0.96.2
1、確保Hadoop和Hbase服務已經正常啓動了 2、把hbase-site.xml,core-site.xml,hdfs-site.xml配置文件放到Java工程的src目錄下 3、引入相關的依賴包 4、Java Client測試
2020-02-27 09:49:26
原创 自定義FlumeKafkaSink
1、自定義FlumeKafkaSink package com.panguoyuan.flume.sink; import java.util.Iterator; import java.util.Map; import java.ut
2020-02-27 09:49:26
原创 Uedit32設置字體大小
1、網上有很多UE可以下載的，可是我試了一下很多都是需要安裝，且還要註冊碼，很複雜，下載了幾個都用不上； 2、我用的這個UE是免安裝的，且不用註冊碼，解壓馬上能用； 3、UE默認的字體很小，都需要重新設置，以下是設置字體大小界面。 （1）
2020-02-27 09:49:26