原创 Hive表刪除表中指定數據

1.分區表 刪除具體partition alter table table_name drop partition(partiton_name='xxx')) 刪除具體partition的部分數據 INSERT OVERWRITE

原创 HBase分析之用戶機制

HBase的用戶機制和Hadoop的用戶機制是一樣的。但對剛接觸的人來說,相當的隱蔽,啓動HBase不用設置用戶名、密碼,連接HBase也不需要設置用戶名、密碼。但HBase(實質上是Hadoop)提供了默認的用戶來執行操作。 超級用戶

原创 Java 11新特性概述

轉自:http://www.52im.net/article-340-1.html 概述   美國時間2018年09 月 25 日,Oralce 正式發佈了 Java 11,這是 Java 8 發佈以後支持的首個長期版本。   爲什麼說

原创 kudu表數據的導入導出

一、kudu數據導出到文件 例: impala-shell -l -u xuyi  --auth_creds_ok_in_clear  -q "select sms_content from warehouse.restart where

原创 Azure Event Hub 技術研究系列2-發送事件到Event Hub

  轉自:https://www.cnblogs.com/tianqing/p/6865046.html 上篇博文中,我們介紹了Azure Event Hub的一些基本概念和架構: Azure Event Hub 技術研究系列1-Even

原创 Azure Event Hub 技術研究系列1-Event Hub入門篇

轉載自:https://www.cnblogs.com/tianqing/p/6839149.html Azure Event Hub的官方介紹: 1. Azure 事件中心是超大規模的遙測引入服務,可收集、傳輸和存儲數以百萬的事件 2.

原创 JAVA12啓用ShenandoahGC

要啓用/使用Shenandoah GC,需要以下JVM選項: -XX:+UnlockExperimentalVMOptions  -XX:+UseShenandoahGC 更多關於調整Shenandoah GC參數的信息,請參考Shena

原创 springboot引用外部jar包並打包成jar程序運行

一、引用外部jar包 1、在項目中建一個目錄並將外部jar包拷貝進去,此處新建目錄名爲libs 2、加入進去的外部jar還是壓縮包,要解壓一下,如下在Libraries添加java,將libs下的jar包都加進去,此時外部jar就解壓完

原创 airflow-api 插件的安裝與使用介紹

本文轉自:https://www.cnblogs.com/ZhangShY/p/10082994.html 原文存在錯誤,使得本人踩了一天的坑,現糾正如下。學習過程可參考https://github.com/teamclairvoyant

原创 shell腳本對空格的嚴格規定

shell 腳本中 空格的注意問題:= 賦值兩邊不能有空格,而if比較判斷時 = 兩邊必須加空格 shell腳本對空格有嚴格的規定,賦值語句等號兩邊不能有空格,而字符串比較,等號兩邊必須有空格 賦值時: i=1     i=$((i+1)

原创 防反射和反序列化破解單例模式

破解代碼: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 /**  *  * 描述:測試反射和反序列化破

原创 Mysql和Redis查詢速度的對比

“在軟件系統中,IO速度比內存速度慢,IO讀寫在很多情況下會是系統的瓶頸,我們也知道Redis的查詢速度比直接查數據庫要快,因爲Redis將數據存在內存中,而mysql的查詢是執行IO操作。那麼他們之間到底有多大的差距呢?” 實例 首先我

原创 azkaban編譯安裝配置文檔

參考官方文檔: http://azkaban.github.io/azkaban/docs/latest/ azkaban的配置文件說明:http://azkaban.github.io/azkaban/docs/latest/#con

原创 Kudu+Impala介紹

轉自:http://www.360doc.com/content/18/0913/16/59691344_786386910.shtml Kudu+Impala介紹 概述 Kudu和Impala均是Cloudera貢獻給Apache基金會

原创 hbase列族作用 HBASE列族不能太多的原因

hbase列族作用 HBASE列族不能太多的原因 來源: 崑山拓天信息網責任編輯:小sHRegionServer內部管理了一系列HRegion對象,每個HRegion對 應了table中的一個region,HRegion中由多 個HSto