原创 elasticsearch6+集羣節點間SSL認證配置

參考文章:https://blog.csdn.net/zk673820543/article/details/81781534 1.bin目錄下運行elasticsearch-certgen:     依次輸入生成cert.zip的文件名

原创 elasticsearch集羣部署,yml配置文件參數配置

1. jvm配置:         1.1內存配置(推薦第一種)                 編輯:config/jvm.options 修改:-Xms20g -Xmx20g                 編輯:bin/elasti

原创 python交互式腳本

用於es生成ssl認證證書: 安裝pexpect,ptyprocess模塊 編寫腳本使用pexpect [root@master bin]# vim python.sh  #!/usr/bin/env python import pexp

原创 es滾動查詢scroll

1.restfu查詢方式: 首先設置滾動查詢並設置超時時間 curl -H "Content-Type: application/json" -u root:111111 -XPOST '172.16.17.212:9201/t3/_s

原创 es分片分配功能reroute

一個es的節點只能存一個分片的主分片或者某一個副本分片,如圖所示: 分片數字相同代表爲同一個分片的不同副本,當設置副本數超過節點數,則會有副本不會被分配 移動分片命令可以將未分配的分片分配到指定節點: commands包括以下幾種:主分

原创 spark查詢hive的簡單應用

使用原因:sparksql應用集羣內存,查詢更快 使用方法:編寫代碼邏輯,使用spark-submit提交到yarn上執行 簡單代碼示例:     核心思想就是編寫查詢sql,然後對獲取到的df數據集再進行邏輯處理,轉存 object

原创 kafka flume 相關操作

kafka:     啓動kafka:         ./kafka-server-start.sh -daemon ../config/server.properties &     新建topic:         ./kafka-

原创 throwable 和 exception

https://blog.csdn.net/hl_java/article/details/76837141

原创 es6 head

https://blog.csdn.net/wangxilong1991/article/details/80618273

原创 java 定時器線程ScheduledExecutorService

初始化:可以指定單個線程池和多個線程池 ScheduledExecutorService executorService= Executors.newSingleThreadScheduledExecutor(); Schedu

原创 elasticsearch6+集羣配置,新增加了節點間SSL認證,cert

1.bin目錄下運行elasticsearch-certgen:     依次輸入生成cert.zip的文件名,節點信息和IP,會在當前目錄生成一個zip壓縮包 2.config目錄下新建cert文件夾,將壓縮包解壓到文件夾會發現ca文件

原创 elasticsearch idea編譯源碼

Edit configuration: -Des.path.conf=C:\Users\caster\Desktop\elasticsearch-6.5.4\home\config -Des.path.home=C:\Users\cast

原创 es6.5.4插件開發

參考連接:     es插件開發教程:    https://www.2cto.com/kf/201709/681446.html     官方插件開發指導:https://www.elastic.co/guide/en/elastics

原创 elasticsearch6.5.4破解白金版xpack

參考文獻: https://www.cnblogs.com/hts-technology/p/9282421.html https://blog.csdn.net/qq_29202513/article/details/82747798

原创 IDEA Eclipse Notepad++快捷鍵

IDEA: 排版:        ctrl alt l 搜索類:      Ctrl n 類內搜索:    ctrl f 替換文本:    ctrl r 全局搜索:     ctrl shift f 補全get/set:    alt i