原创 elasticsearch6+集羣節點間SSL認證配置
參考文章:https://blog.csdn.net/zk673820543/article/details/81781534 1.bin目錄下運行elasticsearch-certgen: 依次輸入生成cert.zip的文件名
原创 elasticsearch集羣部署,yml配置文件參數配置
1. jvm配置: 1.1內存配置(推薦第一種) 編輯:config/jvm.options 修改:-Xms20g -Xmx20g 編輯:bin/elasti
原创 python交互式腳本
用於es生成ssl認證證書: 安裝pexpect,ptyprocess模塊 編寫腳本使用pexpect [root@master bin]# vim python.sh #!/usr/bin/env python import pexp
原创 es滾動查詢scroll
1.restfu查詢方式: 首先設置滾動查詢並設置超時時間 curl -H "Content-Type: application/json" -u root:111111 -XPOST '172.16.17.212:9201/t3/_s
原创 es分片分配功能reroute
一個es的節點只能存一個分片的主分片或者某一個副本分片,如圖所示: 分片數字相同代表爲同一個分片的不同副本,當設置副本數超過節點數,則會有副本不會被分配 移動分片命令可以將未分配的分片分配到指定節點: commands包括以下幾種:主分
原创 spark查詢hive的簡單應用
使用原因:sparksql應用集羣內存,查詢更快 使用方法:編寫代碼邏輯,使用spark-submit提交到yarn上執行 簡單代碼示例: 核心思想就是編寫查詢sql,然後對獲取到的df數據集再進行邏輯處理,轉存 object
原创 kafka flume 相關操作
kafka: 啓動kafka: ./kafka-server-start.sh -daemon ../config/server.properties & 新建topic: ./kafka-
原创 throwable 和 exception
https://blog.csdn.net/hl_java/article/details/76837141
原创 es6 head
https://blog.csdn.net/wangxilong1991/article/details/80618273
原创 java 定時器線程ScheduledExecutorService
初始化:可以指定單個線程池和多個線程池 ScheduledExecutorService executorService= Executors.newSingleThreadScheduledExecutor(); Schedu
原创 elasticsearch6+集羣配置,新增加了節點間SSL認證,cert
1.bin目錄下運行elasticsearch-certgen: 依次輸入生成cert.zip的文件名,節點信息和IP,會在當前目錄生成一個zip壓縮包 2.config目錄下新建cert文件夾,將壓縮包解壓到文件夾會發現ca文件
原创 elasticsearch idea編譯源碼
Edit configuration: -Des.path.conf=C:\Users\caster\Desktop\elasticsearch-6.5.4\home\config -Des.path.home=C:\Users\cast
原创 es6.5.4插件開發
參考連接: es插件開發教程: https://www.2cto.com/kf/201709/681446.html 官方插件開發指導:https://www.elastic.co/guide/en/elastics
原创 elasticsearch6.5.4破解白金版xpack
參考文獻: https://www.cnblogs.com/hts-technology/p/9282421.html https://blog.csdn.net/qq_29202513/article/details/82747798
原创 IDEA Eclipse Notepad++快捷鍵
IDEA: 排版: ctrl alt l 搜索類: Ctrl n 類內搜索: ctrl f 替換文本: ctrl r 全局搜索: ctrl shift f 補全get/set: alt i