原创 DRS:一個開源的STORM系統,用於負載動態調整

DRS:一個開源的STORM系統,用於負載動態調整https://github.com/fuzhengjia/ton-storm-09-drs/blob/master/src/main/java/topology/Dectatio

原创 ubunt下redis分佈式搭建教程:2主機6節點(每臺主機3個節點)

準備:2臺機器 要求:通過2臺機器模擬6個節點,創建出3個master、3個salve 安裝過程 一:下載並解壓 cd /data/software wget http://download.redis.io/releases/r

原创 redis

三臺服務器搭建redis集羣 安裝redis 安裝redis 下載redis-4.0.6.tar.gz 上傳至/home路徑,解壓:tar –xvf redis-4.0.6.tar.gz 進入目錄 cd  /home/redis-4

原创 痛恨Ubuntu

作爲Linux的代表系統,Ubuntu真的太垃圾了,易用性太差1.適配軟件太少2.老子信心苦苦搭建的環境,突然輸入密碼進不去系統了想殺人的心都有了 1.適配軟件太少 QQ,eclipse,Idea根本無法較好的適配 各種使用不方便,垃

原创 storm-hbase集成:win7下用eclipse開發ubuntu上的storm-hbase程序

平時任務實在比較忙,只能先記錄簡單步驟,後續再寫詳細說明。 win7下eclipse中開發統一局域網內hbase程序簡單操作步驟 win7下管理統一局域網內的集羣 1.3臺ubuntu服務器作爲實驗機器,一臺win7作爲管理機器,網線都在

原创 Hadoop,Hbase分佈式集羣配置手冊

在網上搜集了各種配置,經常會出錯,現在把自己已經成功配置處理來的一份配置曬出來。 1.僞分佈式配置手冊 hadoop-2.6.0 habase-2.2.6 hadoop中的部分配置 core-site.xml <?xml version=

原创 在Ubuntu上創建maven工程,編譯器裏一直不能正常使用maven工程

在Ubuntu上創建maven工程,編譯器裏一直不能正常使用maven工程,原來犯了個低級錯誤。沒有檢查到本地的maven環境已經失效。 去網上下載maven安裝包,安裝並配置mave_home後。 在編譯器裏仍然又問題,將編譯器下載

原创 zookeeper配置信息記錄

# The number of milliseconds of each tick tickTime=2000 # The number of ticks that the initial # synchronization

原创 hadoop起動後沒有datanode的問題

查看日誌後發現: java.io.IOException: Incompatible clusterIDs in /home/storm/hadoop/dfs/data: namenode clusterID = CID-bee17bb7

原创 Ubuntu下的IDEA編輯器,創建maven工程後,jar包已經下載,但是在代碼中不導入

Ubuntu下的IDEA編輯器,創建maven工程後,jar包已經下載,但是在代碼中不導入 如圖右側所述,導致代碼中產生了很多錯誤。 就算用手動導入包,仍然不能運行。 後多方查閱子類,發現一個解決方法。 第一步,找到本地maven倉

原创 storm-0.9.3配置信息

# Licensed to the Apache Software Foundation (ASF) under one # or more contributor license agreements. See the NOTICE

原创 分佈式環境下hadoop-2.8.1,hbase-1.3.1的配置文件

分佈式環境下hadoop-2.8.1,hbase-1.3.1的配置文件 我想說的是,各種配置問題太多,一個不對就可能節點掛掉,節點不能啓動等問題,配置步驟已經寫過,現在把配置文件記錄一下,爲以後方便使用。 hadoop目錄下(h1主節點

原创 storm 1.1.1配置信息

注意空格位置,不能多也不能少 storm.zookeeper.servers: - "h1" - "h2" - "h3" nimbus.seeds: ["h1"] # # # ##

原创 transient

java語言的關鍵字,變量修飾符,如果用transient聲明一個實例變量,當對象存儲時,它的值不需要維持。換句話來說就是,用transient關鍵字標記的成員變量不參與序列化過程。 作用 Java的serialization提供了一種持

原创 ZooKeeper分佈式安裝與配置

ZooKeeper分佈式安裝與配置 1. 下載zookeeper二進制安裝包 下載地址:http://mirrors.hust.edu.cn/apache/zookeeper/zookeeper-3.4.9/ 2.解壓zookeeper安