RocketMQ-04自帶優化

此優化腳本包在安裝包的/bin下面 

貼出源碼中的優化腳本:

#!/bin/sh
#
# Execute Only Once
#
echo 'vm.overcommit_memory=1' >> /etc/sysctl.conf
echo 'vm.min_free_kbytes=5000000' >> /etc/sysctl.conf
echo 'vm.drop_caches=1' >> /etc/sysctl.conf
echo 'vm.zone_reclaim_mode=0' >> /etc/sysctl.conf
echo 'vm.max_map_count=655360' >> /etc/sysctl.conf
echo 'vm.dirty_background_ratio=50' >> /etc/sysctl.conf
echo 'vm.dirty_ratio=50' >> /etc/sysctl.conf
echo 'vm.page-cluster=3' >> /etc/sysctl.conf
echo 'vm.dirty_writeback_centisecs=360000' >> /etc/sysctl.conf
echo 'vm.swappiness=10' >> /etc/sysctl.conf
sysctl -p
echo 'ulimit -n 655350' >> /etc/profile
echo 'admin hard nofile 655350' >> /etc/security/limits.conf
DISK=`df -k | sort -n -r -k 2 | awk -F/ 'NR==1 {gsub(/[0-9].*/,"",$3); print $3}'`
[ "$DISK" = 'cciss' ] && DISK='cciss!c0d0'
echo 'deadline' > /sys/block/$DISK/queue/scheduler
echo "---------------------------------------------------------------"
sysctl vm.overcommit_memory
sysctl vm.min_free_kbytes
sysctl vm.drop_caches
sysctl vm.zone_reclaim_mode
sysctl vm.max_map_count
sysctl vm.dirty_background_ratio
sysctl vm.dirty_ratio
sysctl vm.page-cluster
sysctl vm.dirty_writeback_centisecs
sysctl vm.swappiness
su - admin -c 'ulimit -n'
cat /sys/block/$DISK/queue/scheduler


這個腳本分別修改了網絡參數 、admin的硬資源限制 、硬盤的刷盤模式

看了下 不能直接運行 

需要做以下更改

這個腳本中使用了admin 這個用戶,估計阿里的mq是用admin啓動的

如果你用root啓動RocketMQ 其中的 

?

1
2
echo 'ulimit -n 655350' >> /etc/profile
echo 'admin hard nofile 655350' >> /etc/security/limits.conf


 這兩行可以註釋掉, 不過生產環境中還是不推薦直接用root啓動服務,所以我useradd admin了。

另個是硬盤優化部分

首先需要知道RockerMQ 運行產生的文件log 都會放在運行用戶的家目錄中

所以可以在home目錄中建個admin 然後將盤掛到/home/admin就可以

接下來是硬盤刷盤模式( I/O Scheduling)

?

1
2
3
DISK=`df -k | sort -n -r -k 2 | awk -F/ 'NR==1 {gsub(/[0-9].*/,"",$3); print $3}'`
"$DISK" 'cciss' ] && DISK='cciss!c0d0'
echo 'deadline' /sys/block/$DISK/queue/scheduler


這個也不適用於筆者的環境。目的是要把硬盤的刷盤模式改爲deadline

查看下當前硬盤刷盤模式(筆者硬盤爲sda)

?

1
2
#cat /sys/block/sda/queue/scheduler
noop anticipatory deadline [cfq]


好吧手動改下

?

1
2
3
#echo 'deadline' > /sys/block/sda/queue/scheduler
#cat /sys/block/sda/queue/scheduler 
noop anticipatory [deadline] cfq


這種方式是立即生效 但是重啓後會丟失

如果需要重啓後也是deadline 需要添加grub參數

編輯/etc/grub.conf

找到kernel那行 在最後添加

?

1
elevator=deadline



至此完成了此腳本中所做的優化

最後貼出一份筆者改後的(僅僅把參數變量化 方便複用)

注意: (需要root 或 sudo權限纔可執行) 請將腳本中用戶和盤符換成你的


#!/bin/sh
#
# Execute Only Once 只可執行一次
#
#用戶名
USER=admin
#磁盤盤符
DISK=sda
##在grub.conf中添加參數 默認註釋掉 需要使用請取消註釋
#sed -i 's/kernel.*$/& elevator=deadline/' /etc/grub.conf
 
echo 'vm.overcommit_memory=1' >> /etc/sysctl.conf
echo 'vm.min_free_kbytes=5000000' >> /etc/sysctl.conf
echo 'vm.drop_caches=1' >> /etc/sysctl.conf
echo 'vm.zone_reclaim_mode=0' >> /etc/sysctl.conf
echo 'vm.max_map_count=655360' >> /etc/sysctl.conf
echo 'vm.dirty_background_ratio=50' >> /etc/sysctl.conf
echo 'vm.dirty_ratio=50' >> /etc/sysctl.conf
echo 'vm.page-cluster=3' >> /etc/sysctl.conf
echo 'vm.dirty_writeback_centisecs=360000' >> /etc/sysctl.conf
echo 'vm.swappiness=10' >> /etc/sysctl.conf
sysctl -p
echo "ulimit -n 655350" >> /etc/profile
echo "$USER hard nofile 655350" >> /etc/security/limits.conf
echo 'deadline' > /sys/block/$DISK/queue/scheduler
echo "---------------------------------------------------------------"
sysctl vm.overcommit_memory
sysctl vm.min_free_kbytes
sysctl vm.drop_caches
sysctl vm.zone_reclaim_mode
sysctl vm.max_map_count
sysctl vm.dirty_background_ratio
sysctl vm.dirty_ratio
sysctl vm.page-cluster
sysctl vm.dirty_writeback_centisecs
sysctl vm.swappiness
su - $USER -c 'ulimit -n'
cat /sys/block/$DISK/queue/scheduler

?


至此 優化結束。

I/O Scheduling 配置參照 http://doc.opensuse.org/products/draft/SLES/SLES-tuning_sd_draft/cha.tuning.io.html#cha.tuning.io.schedulers

阿里os.sh源腳本:

https://github.com/alibaba/RocketMQ/blob/develop/bin/os.sh


來源: <http://my.oschina.net/firxiao/blog/315647>

 
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章