原创 開啓防火牆下的配置

centos7下,利用firewall-cmd配置策略 1、開放80端口firewall-cmd --permanent --add-port=80/tcp 2、移除端口firewall-cmd --permanent --remove-

原创 Clickhouse 內存問題

User class threw exception: ru.yandex.clickhouse.except.ClickHouseException: ClickHouse exception, code: 241, host: 10.

原创 建立SSH互信

建立互信的步驟如下: 1、在各節點通過ssh-keygen生成RSA密鑰和公鑰 ssh-keygen -q -t rsa -N "" -f ~/.ssh/id_rsa 2、將所有的公鑰文件彙總到一個總的授權key文件中,在M01機器

原创 Flink 的廣播變量

Flink 支持廣播變量,就是將數據廣播到具體的 taskmanager 上,數據存儲在內存中,這樣可以減緩大量的 shuffle 操作; 比如在數據 join 階段,不可避免的就是大量的 shuffle 操作,我們可以把其中一個 dat

原创 Elasticsearch 分頁問題

Elasticsearch分頁一般有三種方式: 1.form和size的方式 2.Scroll api 3.search_after參數   from+size分頁 按照一般的查詢流程來說,如果我想查詢前10條數據:     1 客戶端請

原创 JDK代理和Cglib代理

1.動態代理 動態代理有以下特點: 1.代理對象,不需要實現接口 2.代理對象的生成,是利用JDK的API,動態的在內存中構建代理對象(需要我們指定創建代理對象/目標對象實現的接口的類型) 3.動態代理也叫做:JDK代理,接口代理 JDK

原创 Dockerfile構建jar鏡像

https://www.cnblogs.com/linyufeng/p/12058595.html#e5ae89e8a385dockere5928ccompose_1   https://blog.csdn.net/qq_25112523

原创 jsch教程(用java ssh 提交spark yarn任務)

jsch 是ssh2的一個純Java實現。它允許你連接到一個sshd 服務器,使用端口轉發,X11轉發,文件傳輸等等。你可以將它的功能集成到你自己的 程序中。同時該項目也提供一個J2ME版本用來在手機上直連SSHD服務器。 一般連接到服

原创 Elasticsearch search_after java查詢

/** * 實時統計查詢 * @param dto * @param esSkip * @param pageSize * @return */ public Map<

原创 Elasticsearch scroll java

package com.ygsoft.jvm.read; import java.net.InetAddress; import java.util.HashMap; import java.util.Map; import java

原创 InfluxDB-InfluxQL基礎語法教程--LIMIT and SLIMIT 子句

本文翻譯自官網,官網地址:(https://docs.influxdata.com/influxdb/v1.7/query_language/data_exploration/) LIMIT和SLIMIT分別用於限制InfluxDB中每次

原创 InfluxDB-InfluxQL基礎語法教程--GROUP BY子句

本文翻譯自官網,官網地址:(https://docs.influxdata.com/influxdb/v1.7/query_language/data_exploration/) GROUP BY子句通過用戶自己制定的tags set或

原创 InfluxDB-InfluxQL基礎語法教程--GROUP BY子句

本文翻譯自官網,官網地址:(https://docs.influxdata.com/influxdb/v1.7/query_language/data_exploration/) GROUP BY子句通過用戶自己制定的tags set或

原创 InfluxDB-InfluxQL基礎語法教程--ORDER BY子句

本文翻譯自官網,官網地址:(https://docs.influxdata.com/influxdb/v1.7/query_language/data_exploration/) 在InfluxDB中查詢時,默認返回的數據時按照time升

原创 InfluxDB學習之InfluxDB連續查詢(Continuous Queries)

在上一篇:InfluxDB學習之InfluxDB數據保留策略(Retention Policies) 中,我們介紹了 InfluxDB的數據保留策略,數據超過保存策略裏指定的時間之後,就會被刪除。 但是如果我們不想完全將這些數據刪除掉,就