原创 Inceptor命令01-表介紹

Inceptor命令01-表介紹    • 表的劃分-不同維度    1. 按 Inceptor的所有權 分類可分爲:外部表(或簡稱爲外表)和託管表(內表)。     2. 按 表的存儲格式 分類可分爲:TEXT表、ORC表、CSV表和Ho

原创 map的分片

 

原创 TDH學習02-Kubernetes

 

原创 Inceptor命令02-命令使用

beeline使用方式1. 無認證./beeline -u jdbc:hive2://{inceptor_server}:100002. 使用Kerberos認證kinit -kt /etc/sql2/hive.keytab hive/ba

原创 presto對接TDH5.2.4版本

Presto是什麼? Presto是一個開源的分佈式SQL查詢引擎,適用於交互式分析查詢,數據量支持GB到PB字節。 Presto的設計和編寫完全是爲了解決像Facebook這樣規模的商業數據倉庫的交互式分析和處理速度的問題。 它可以做什麼

原创 hive數據庫如何去重,去除相同的一模一樣的數據

問題:發現存在一張表中存在相同的兩行數據 得到:僅僅保留一行數據 方法: 原理-我們通過 1 select count (字段1,字段2) from 表1; 2 3 結果 200條數據 4 5 select count (d

原创 星環TDH大數據平臺,數據誤刪除之後,恢復辦法

  機制:TDH裏面數據刪除之後,會在hdfs下面生成delta的文件,該文件在下次該表修改時候進行刪除compact合併 也就是說我們要在compact之前,刪除delta即可恢復到最新的一次版本 --比如新建一個分糖數爲3的orc事務表

原创 flume 配置實例.md

從文件到kafka # flume-directory-kafka.conf: A single-node Flume configuration # Name the components on this agent a3.sources

原创 idea中copyright使用

1,在idea中找到settings->Editor->copyright->copyright profiles,然後點擊+,輸入名字,在copyright text中輸入模板.然後點擊右下角apply.模板:   Copyright(c

原创 maven私服nexus上傳第三方jar包以及下載

在maven中,配置setting.xml,之後通過mvn deploy命令可以將包傳入私服 有些第三方jar包,我們需要一般通過新建倉庫進行上傳 setting.xml配置 <servers> <server>

原创 openlive writer 漢化方法

使用方法: 替換你安裝openlive writer 位置C:\Users\Administrator\AppData\Local\OpenLiveWriter的 app目錄 下的 OpenLiveWriter.Localization.d