最近公司打算起一個IM的項目, 讓所有人蔘與預研一下,本着學習的態度, 將goim環境的搭建過程在這裏做個記錄
大佬直接繞過就好,菜鳥進來看看
1. 出於性能方面的考慮,計劃使用go語言來做開發
a. go語言學習,初步入門, 看菜鳥教程就好,簡單易入手
b.重新開發,那是不可能的,一個im框架,協議,緩存, 消息隊列, 分佈式管理, 想要短時間內完成,不可能
上github, goim這個框架star 3k+, 可以一試, 源碼地址
2. 好了,選好了框架, 接下去就是起個demo(?hello world)
看到goim的架構圖, 就知道這事沒那麼簡單(傾刪)
依賴還挺多, discovery, kafka, redis。redis還好,這kafka不熟啊, 還有discovery是什麼玩意兒?
kafka一個高性能分佈式消息隊列, 用來存數據;
redis用來存儲一些在線狀態數據
discovery用來做服務治理的。
3. goim代碼環境,這個相對比較簡單
a.搭建golang環境, 怎麼配置,看這裏就好了,看不懂,自行百度就好, 沒有特別要求
b. 環境好了, clone一下goim源碼到GOPATH/src/目錄底下
c.安裝goim依賴, github上都有說明,過程不報錯就是下載成功了
4. redis以及kafka
可以自己下載安裝包進行安裝,測試:redis安裝包,kafka安裝包, 這裏順便附上kafka簡單文檔
繁瑣, 但是傻瓜式操作, 到這裏各個組件獨立部分的安裝就結束了。但是, 怎麼能這麼玩呢?必須裝一下逼
還記得docker這麼個好東西嗎, 必須用起來啊, 安裝環境什麼的,自己是不可能去安裝了, 上docker。
docker看起來還是麻煩啊,還要拉取鏡像, 做配置, 啓動容器...
docker-compose怎樣, 工具就是拿來用的(docker-compose環境怎麼裝, 自行百度,不會的留言)
我自己簡單弄了一個用於運行demo的docker-compose.yml配置文件,如下(可以直接用哦)
version: '2'
services:
zookeeper:
image: wurstmeister/zookeeper
ports:
- "2181:2181"
networks:
- dev
redis:
image: redis
ports:
- "6379:6379"
networks:
- dev
kafka:
image: wurstmeister/kafka
ports:
- "9094:9094"
environment:
KAFKA_CREATE_TOPICS: "goim-push-topic"
KAFKA_ADVERTISED_LISTENERS: INSIDE://kafka:9092,OUTSIDE://127.0.0.1:9094
KAFKA_LISTENERS: INSIDE://kafka:9092,OUTSIDE://kafka:9094
KAFKA_LISTENER_SECURITY_PROTOCOL_MAP: INSIDE:PLAINTEXT,OUTSIDE:PLAINTEXT
KAFKA_INTER_BROKER_LISTENER_NAME: INSIDE
KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181
volumes:
- /var/run/docker.sock:/var/run/docker.sock
networks:
- dev
networks:
dev:
driver: bridge
配置看不懂, 沒關係,看這裏
創建一個文件夾,放入這個文件,執行
docker-compse up -d
redis+zookeeper+kafka 幾個環境全部OK
5 discovery, 服務發現依賴(b站出的)
不建議使用源碼編譯, 因爲依賴有點亂, 根本編譯不了好伐。
直接下載編譯好的文件,直接下載
運行命令如下
./discovery -conf {path-to-config}/discovery-example.toml
配置當中的IP地址自行替換成啓動該服務的IP地址
6. 依賴的模塊都安裝好了, 接下去就是起demo了
目錄切換到goim源碼底下
go build
在源碼底下生成target目錄,target底下其他文件不用看, 就看三個comet.toml, logic.toml, job.toml
我這裏給出幾個配置樣例, 具體的IP要根據,每個服務所在IP和端口號
comet.toml文件如下
# This is a TOML document. Boom
#discovery服務IP以及地址
[discovery]
nodes = ["192.168.65.130:7171"]
[rpcServer]
addr = ":3109"
timeout = "1s"
[rpcClient]
dial = "1s"
timeout = "1s"
[tcp]
bind = [":3101"]
sndbuf = 4096
rcvbuf = 4096
keepalive = false
reader = 32
readBuf = 1024
readBufSize = 8192
writer = 32
writeBuf = 1024
writeBufSize = 8192
[websocket]
bind = [":3102"]
tlsOpen = false
tlsBind = [":3103"]
certFile = "../../cert.pem"
privateFile = "../../private.pem"
[protocol]
timer = 32
timerSize = 2048
svrProto = 10
cliProto = 5
handshakeTimeout = "8s"
[whitelist]
Whitelist = [123]
WhiteLog = "/tmp/white_list.log"
[bucket]
size = 32
channel = 1024
room = 1024
routineAmount = 32
routineSize = 1024
logic.toml文件如下
# This is a TOML document. Boom
#discovery服務IP端口號
[discovery]
nodes = ["192.168.65.130:7171"]
[regions]
"bj" = ["北京","天津","河北","山東","山西","內蒙古","遼寧","吉林","黑龍江","甘肅","寧夏","新疆"]
"sh" = ["上海","江蘇","浙江","安徽","江西","湖北","重慶","陝西","青海","河南","臺灣"]
"gz" = ["廣東","福建","廣西","海南","湖南","四川","貴州","雲南","西藏","香港","澳門"]
[node]
#goim相關域名和端口號設置, 需要和comet當中對應
defaultDomain = "localhost"
hostDomain = "localhost"
heartbeat = "4m"
heartbeatMax = 2
tcpPort = 3101
wsPort = 3102
wssPort = 3103
regionWeight = 1.6
[backoff]
maxDelay = 300
baseDelay = 3
factor = 1.8
jitter = 0.3
[rpcServer]
network = "tcp"
addr = ":3119"
timeout = "1s"
[rpcClient]
dial = "1s"
timeout = "1s"
[httpServer]
network = "tcp"
addr = ":3111"
readTimeout = "1s"
writeTimeout = "1s"
#kafka配置
[kafka]
topic = "goim-push-topic"
brokers = ["192.168.65.130:9094"]
#redis配置
[redis]
network = "tcp"
addr = "192.168.65.130:6379"
active = 60000
idle = 1024
dialTimeout = "200ms"
readTimeout = "500ms"
writeTimeout = "500ms"
idleTimeout = "120s"
expire = "30m"
job.toml文件如下
[discovery]
nodes = ["192.168.65.130:7171"]
[kafka]
topic = "goim-push-topic"
group = "goim-push-group-job"
brokers = ["192.168.65.130:9094"]
切會goim源碼目錄
make run
到這裏, goim的服務已經啓用完畢
7. 結合client測試服務啓動情況
goim在github已經給出了例子
將這幾個文件拷貝到任意目錄,修改websocket的訪問IP(即goim啓用服務器的IP或域名), 如果直接使用上述配置文件裏的端口號,那麼就不用改端口後, 編譯一下main.go文件,直接run生成的main文件
打開瀏覽器, 輸入客戶端所在IP或域名
http://{your-ip-address}:{port_number}
看到status=ok, 說明啓用成功
第二個紅圈劃出來的就是測試消息發送的命令行,將域名改成goim服務所在IP或者名稱, 就可以測試了
如果在下面message那塊出現你發送的消息, 恭喜你,demo好了
備註:
1. 配置文件當中的IP地址就是哪些服務所在的IP地址,請自行修改(過程有任何問題,歡迎留言)
2. 當然,到這裏, 也僅僅是demo階段,具體的業務邏輯,需要修改goim代碼(開源的,放心用)
我這裏使用的redis和kafka都是單機形式, 生產上一般都會使用高可用, 有時間再詳細說明。