原创 開啓防火牆下的配置
centos7下,利用firewall-cmd配置策略 1、開放80端口firewall-cmd --permanent --add-port=80/tcp 2、移除端口firewall-cmd --permanent --remove-
原创 Clickhouse 內存問題
User class threw exception: ru.yandex.clickhouse.except.ClickHouseException: ClickHouse exception, code: 241, host: 10.
原创 建立SSH互信
建立互信的步驟如下: 1、在各節點通過ssh-keygen生成RSA密鑰和公鑰 ssh-keygen -q -t rsa -N "" -f ~/.ssh/id_rsa 2、將所有的公鑰文件彙總到一個總的授權key文件中,在M01機器
原创 Flink 的廣播變量
Flink 支持廣播變量,就是將數據廣播到具體的 taskmanager 上,數據存儲在內存中,這樣可以減緩大量的 shuffle 操作; 比如在數據 join 階段,不可避免的就是大量的 shuffle 操作,我們可以把其中一個 dat
原创 Elasticsearch 分頁問題
Elasticsearch分頁一般有三種方式: 1.form和size的方式 2.Scroll api 3.search_after參數 from+size分頁 按照一般的查詢流程來說,如果我想查詢前10條數據: 1 客戶端請
原创 JDK代理和Cglib代理
1.動態代理 動態代理有以下特點: 1.代理對象,不需要實現接口 2.代理對象的生成,是利用JDK的API,動態的在內存中構建代理對象(需要我們指定創建代理對象/目標對象實現的接口的類型) 3.動態代理也叫做:JDK代理,接口代理 JDK
原创 Dockerfile構建jar鏡像
https://www.cnblogs.com/linyufeng/p/12058595.html#e5ae89e8a385dockere5928ccompose_1 https://blog.csdn.net/qq_25112523
原创 jsch教程(用java ssh 提交spark yarn任務)
jsch 是ssh2的一個純Java實現。它允許你連接到一個sshd 服務器,使用端口轉發,X11轉發,文件傳輸等等。你可以將它的功能集成到你自己的 程序中。同時該項目也提供一個J2ME版本用來在手機上直連SSHD服務器。 一般連接到服
原创 Elasticsearch search_after java查詢
/** * 實時統計查詢 * @param dto * @param esSkip * @param pageSize * @return */ public Map<
原创 Elasticsearch scroll java
package com.ygsoft.jvm.read; import java.net.InetAddress; import java.util.HashMap; import java.util.Map; import java
原创 InfluxDB-InfluxQL基礎語法教程--LIMIT and SLIMIT 子句
本文翻譯自官網,官網地址:(https://docs.influxdata.com/influxdb/v1.7/query_language/data_exploration/) LIMIT和SLIMIT分別用於限制InfluxDB中每次
原创 InfluxDB-InfluxQL基礎語法教程--GROUP BY子句
本文翻譯自官網,官網地址:(https://docs.influxdata.com/influxdb/v1.7/query_language/data_exploration/) GROUP BY子句通過用戶自己制定的tags set或
原创 InfluxDB-InfluxQL基礎語法教程--GROUP BY子句
本文翻譯自官網,官網地址:(https://docs.influxdata.com/influxdb/v1.7/query_language/data_exploration/) GROUP BY子句通過用戶自己制定的tags set或
原创 InfluxDB-InfluxQL基礎語法教程--ORDER BY子句
本文翻譯自官網,官網地址:(https://docs.influxdata.com/influxdb/v1.7/query_language/data_exploration/) 在InfluxDB中查詢時,默認返回的數據時按照time升
原创 InfluxDB學習之InfluxDB連續查詢(Continuous Queries)
在上一篇:InfluxDB學習之InfluxDB數據保留策略(Retention Policies) 中,我們介紹了 InfluxDB的數據保留策略,數據超過保存策略裏指定的時間之後,就會被刪除。 但是如果我們不想完全將這些數據刪除掉,就