原创 kafka節點之間如何複製備份的
生產者向topic中發送數據，消費者消費該topic對應的數據，爲了提高吞吐量，生產者會將該topic對應的數據分別發送到多個partition，每個partition都有一定數量的副本作爲備份，以提高kafka的高可用性。如下圖所示：
2019-02-01 20:05:51
20
原创 Kafka提交偏移量的五種方式
討論偏移量我們首先要知道如何查看偏移量及消費者目前消費的偏移量 ./kafka-consumer-groups.sh --describe --bootstrap-server 192.168.153.128:9092 --group C
2019-02-01 20:05:51
原创 kafka topic config 參數
kafka版本：http://mirrors.hust.edu.cn/apache/kafka/2.1.0/kafka_2.12-2.1.0.tgz 1、cleanup.policy：過期或達到日誌上限的清理策略（delete-刪除；co
2019-02-01 20:05:51
原创 linux命令專欄（五）之vim
vim是一個類似於vi的著名的功能強大的文本編輯器，在vi的基礎上改進和增加了很多特性 :w 將緩衝區寫入文件，即保存修改 :wq 保存修改並退出 :x 保存修改並退出 :q 退出，如果對緩衝區進行過修改，則會提示 :q! 強制退出，放棄
2018-12-07 19:44:20
原创 linux離線安裝nginx
離線安裝我們首先需要下載安裝nginx需要的各種安裝包，如何下載與自己的系統版本兼容的安裝文件，請參考一下博文： http://blog.sina.com.cn/s/blog_13887bf130102xl44.html 如果你不想單個安
2018-12-07 19:44:20
原创 linux命令專欄（四）之find
find命令可以在一個目錄（及子目錄）中搜索文件，也可以指定一些匹配條件，如按文件名、文件類型、用戶甚至是時間戳查找文件。 用法：find [-H] [-L] [-P] [-D debugopts] [-Olevel] [path...]
2018-12-07 19:44:20
原创 linux命令專欄（三）之curl
curl是一個利用url語法在命令行下工作的文件傳輸工具。它支持文件上傳和下載，所以是綜合傳輸工具，但按傳統習慣成curl爲下載工具。 常用用法： -o 把輸出寫到指定的文件中 -O 把輸出寫到文件中，文件名爲遠程文件名 -r 如果一個文
2018-11-28 13:08:33
原创 linux命令專欄（二）之wget
wget是一個十分常用的linux命令行下載工具，大多數linux發行版本默認都包含這個工具，如果沒有這個工具。可以用yum進行安裝。 常用用法：wget [選項]... [URL]... -b 後臺下載，wget默認的是把文件下載到當
2018-11-28 13:08:33
原创 linux命令專欄（四）之打包和解壓縮
linux下的壓縮包格式衆多，有.tar、.gz、.tar.gz、.tgz 、.bz2 、.tar.bz2 、.Z 、.tar.Z 、.zip 、.rar等多種壓縮文件格式。其中最常見的是.zip 、.gz 、.bz2 、.tar.gz
2018-11-28 13:08:33
原创 linux安裝nginx
操作系統：centos7 virtualBox虛擬機 1、確定安裝路徑： 2、下載安裝包： wget http://nginx.org/download/nginx-1.15.3.tar.gz 解壓：tar -xvzf nginx-1
2018-11-04 05:08:42
原创 Centos7防火牆的關閉與開啓，開放端口
1、首先查看防火牆的狀態：systemctl status firewalld active（代表防火牆是開啓狀態） 2、關閉防火牆：systemctl stop firewalld 可以看到防火牆已經被關閉了。 3、打開防火牆：sy
2018-11-04 05:08:42
原创 linux安裝zookeeper
我實在本地搭建的虛擬機，zookeeper也是在虛擬機上搭建的，現在記錄一下搭建的過程： 1、確定安裝路徑 cd /usr/local/bigdata/zookeeper/ 2、下載安裝包 wget https://mirrors.shu
2018-10-15 04:13:56
1
原创 關於使用webuploader上傳文件出現的The temporary upload location is not valid
用webUploader插件上傳文件的時候，經常出現如下問題： 用google瀏覽器進行調試，console頁問題如下： network頁問題如下： 下面我們重點看一下spring給我們提供的這幾個類裏面是如何對我這次請求進行處理的：
2018-10-13 04:24:55
原创 spring tool suite和eclipse安裝jad反編譯插件
文章轉載自： https://blog.csdn.net/llpj520/article/details/41528827 我只親自試驗了spring tool suite，按照樓主的操作步驟是可以正確安裝該插件的。但是eclipse我沒
2018-09-30 04:33:12
2
原创 如何配置線程池
需求：08:00-20:00,12個小時之內，發送200萬數據到短信網關，每個小時17萬，保證每分鐘2800（max_hour_count=2800）條，之前客戶配的活動做多也就只有幾萬，十幾萬，過年期間短信量陡增，配了一個70萬的活動，
2018-09-13 04:51:13