Codis部署與pipline寫入出錯的解決

一、準備工作

    軟件

    zookeeper-3.4.6.tar.gz

    go1.6.3.linux-amd64.tar.gz

    創建目錄

    mkdir -pv /usr/local/gopkg

    基礎依賴

    yum install -y git gcc make g++ gcc-c++ automake openssl-devel zlib-*

    JDK


二、應用部署

1、zookeeper  &  go

go解壓後配置環境變量即可;

zookeeper解壓後配置環境變量,還需複製標準配置文件,然後修改並創建其data目錄;

 操作步驟如下:

tar zxvf zookeeper-3.4.6.tar.gz -C /usr/local/
tar zxvf  go1.6.3.linux-amd64.tar.gz  -C /usr/local/
vim /etc/profile

#追加

export PATH=$PATH:/usr/local/go/bin

export GOROOT=/usr/local/go

export GOPATH=/usr/local/gopkg

export ZOOKEEPER_HOME=/usr/local/zookeeper-3.4.6

export PATH=$GOROOT/bin:$PATH:$GOPATH/bin:$ZOOKEEPER_HOME/bin

source /etc/profile
cd /usr/local/zookeeper-3.4.6/conf
cp zoo_sample.cfg  zoo.cfg
vim zoo.cfg
dataDir=/usr/local/zookeeper-3.4.6/data
mkdir -pv /usr/local/zookeeper-3.4.6/data
/usr/local/zookeeper-3.4.6/bin/zkServer.sh  start


 2、Codis

go get -u -d github.com/CodisLabs/codis
cd gopkg/src/github.com/CodisLabs/codis/
make
vim config.ini

修改如下兩項爲服務器地址即可

wKiom1g1UYeAKVAeAAAsezyecu8390.gif

cd /usr/local/gopkg/src/github.com/CodisLabs/codis
bin/codis-config dashboard &
bin/codis-config slot init

此時瀏覽器訪問 http://IP:18087

codis-proxy啓動命令

nohup bin/codis-proxy -c config.ini -L ./log/proxy.log --log-level=debug --cpu=2 --addr=0.0.0.0:19000 --http-addr=0.0.0.0:11000 &


三、補充說明

1、啓動順序

     zookeeper-->codis dashboard-->codis-proxy

即如下操作:

/usr/local/zookeeper-3.4.6/bin/zkServer.sh  start
cd /usr/local/gopkg/src/github.com/CodisLabs/codis
bin/codis-config dashboard &     
nohup bin/codis-proxy -c config.ini -L ./log/proxy.log --log-level=debug --cpu=2 --addr=0.0.0.0:19000 --http-addr=0.0.0.0:11000 &

2、關於pipeline方式time out的解決

    開發通過pipeline方式一次性寫入8w key的時候報錯,經目前查找發現應該和codis-proxy代理的緩衝及zookeeper server端連接超時有關,目前修改配置如下

    codis配置文件  config.ini

session_max_pipeline=80000

zookeeper配置文件  zoo.cfg

tickTime=2000000


這是以前部署Codis的記錄,套路基本就是這樣,細節處可能有遺漏




本文出自 “泥淖” 博客,請務必保留此出處http://cangzihu.blog.51cto.com/6671848/1875861

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章