原创 inux內核調優tcp_max_syn_backlog和somaxconn的區別
wjw555關注1人評論12143人閱讀2018-04-18 11:29:50 The behavior of the backlog argument on TCP sockets changed with Lin
2020-07-06 23:18:13
原创 ElasticSearch CPU和內存佔用高的優化記錄出現GC
公司最近使用ElasticSearch作爲數據報表彙總引擎.上線三個月累計數據800萬,但是今天突然大面積出現查詢超時,上服務器查看服務運行情況,發現cpu使用率高達300% mem 使用率也到了90%,下面記錄了整個排
2020-07-06 23:17:59
179
原创 ElasticSearch6.3.2 中的JVM性能調優
前一段時間被人問了個問題：在使用ES的過程中有沒有做過什麼JVM調優措施？ 在我搭建ES集羣過程中，參照important-settings官方文檔來的，並沒有對JVM參數做過多的調整。但談到JVM配置參數，少不了操作系統層面上的一些
2020-07-06 23:17:59
1
原创 Linux下查看併發連接數
netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}' 我解釋一下，如果有不對的，請高手指教。 /^tcp/ # 搜索以tcp開頭的行 S[$NF]
2020-07-06 23:17:59
原创 elasticsearch實現冷熱數據分離
目錄(?)[-] es架構 各節點的es配置 如何實現某索引數據寫到指定的node根據節點tag即可 如何實現數據從hot節點遷移到老的cold節點 cold節點數據保留1個月 優化點 logstash測試 關於es的index te
2020-07-06 23:17:59
24
原创 elasticsearch 的日誌gc
[2018-06-30T17:57:23,848][WARN ][o.e.m.j.JvmGcMonitorService] [qoo--eS] [gc][228384] overhead, spent [2.2s] collec
2020-07-06 23:17:59
5
原创 ss - 研究套接字的另一個實用程序
參數 Usage: ss [ OPTIONS ] ss [ OPTIONS ] [ FILTER ] -h, --help this message #顯示幫助菜單 -V, --
2020-07-06 23:17:59
原创 elasticsearch jvm優化
測試環境elasticsearch jvm 4G jdk1.8 [serveradm@test-log-server elasticsearch]$ java -version java version "1.8.0_212" Ja
2020-07-06 23:17:59
14
原创 jstat查看gc情況
jstat通常用來分析系統的垃圾回收情況。 1）命令： jstat -gccause pid 2000 #每格2秒輸出結果 或 jstat -gcutil pid 2000 2）分析： S0、S1 代表兩個Survivor區；
2020-07-06 23:17:59
原创 Elasticsearch集羣模式知多少
01序言 Elasticsearch經過多年發展，集羣模式已經非常成熟，涵蓋的技術點非常多，對於使用者來說，掌握並熟練運用至關重要。那麼Elasticsearch有多少種集羣模式呢？當前適合哪種集羣模式？本文不涉及實戰操作，僅限集羣原理範
2020-07-06 23:17:59
4
原创 Elasticsearch 7.7部署
Elasticsearch(簡稱:ES)是一個開源的分佈式搜索引擎, Elasticsearch 還是一個分佈式文檔數據庫.並提供了大量數據的存儲功能快速的搜索與分析功能. 起源於 Lucene, 基於 Java 語言開發的搜索引擎
2020-07-06 23:17:59
16
原创 高併發有關的內核參數
業務起來了，併發上來了，高峯時期也達到1.6wrps了，長連接數量達到了5w，爲了生存，才研究如何提高併發。 1. net.core.netdev_max_backlog net.core.netdev_max_backlog參數
2020-07-06 23:17:59
原创 一文掌握並應用Elasticsearch中的GC實現垃圾日誌處理
如果你關注過 Elasticsearch 的日誌，可能會看到如下類似的內容： [2018-06-30T17:57:23,848][WARN ][o.e.m.j.JvmGcMonitorService] [qoo--eS] [gc][22
2020-07-06 23:17:59
52
原创 Docker 部署 Elasticsearch - 權限認證
Elasticsearch 認證插件選擇 這裏選擇一個免費的：社區插件 Readonly REST 下載地址：https://readonlyrest.com/download/ 1、進入網站後 選擇插件類型、elastic版本、郵箱
2020-07-06 23:17:59
原创 Elasticsearch的filter的caching（緩存）機制詳解
編程界的小學生 2017-12-27 07:50:54 直接舉例說明 1.假設現在要在倒排索引中去搜索字符串（xxx） 比如如下有個倒排索引列表： 我現在要搜索：2017-02-02 去倒排索引中找，發現對應的document
2020-07-06 23:17:59