原创 logstash常見數據清洗配置
ogstash通過插件的形式來配置input，filter，output，在消費數據後，如果需要對數據做處理,需要用到filter的很多功能。最近使用logstash傳遞kafka數據到es時，瞭解了一些logstash處理數據的方式，以
2020-07-07 17:40:23
30
原创 Eclipse錯誤：找不到或無法加載主類 解決辦法
今天在擼代碼，又遇到了找不到或者無法加載主類的情況，同一個項目，其他的類都可以照常運行，但是唯獨只有這一個類出現這種情況。從網上百度了一下，說是jar包缺失，無法完成編譯，可是我看了一下項目的Build Path,沒發現少包。這裏記錄一下
2020-02-25 11:16:06
原创 啓動ArcGIS Serer 端口衝突問題解決方法
啓動ArcGIS Server （10.1）時提示端口衝突，好多功能啓動不了，如下圖所示： 解決方法： 1、在cmd命令中輸入命令 netstat -ano|findstr "4000",找出端口4000被佔用的進程； 2、任務管理器
2020-02-25 11:16:06
原创 Oracle查詢某一列的重複部分
select from 一個表 select 某字段（列名） from 一個表（表名） group by 某字段（列名） having count(1)>1) 例如： select columnname from tablename
2020-02-25 11:16:06
原创 Oracle去除重複數據的方法
在網上看到這篇文章，感覺很不多，就記錄下來 ，希望對大家能有些幫助！http://www.cnblogs.com/mq0036/p/3701602.
2020-02-25 11:16:06
原创 Hbase 查詢某一列的所有時間版本的數據
shell 命令 scan '表名稱',{FILTER => "PrefixFilter ('rowkey')",RAW => true, VERSIONS => 10}
2020-02-25 11:15:56
原创 阿里新一代實時計算引擎 Blink，每秒支持數十億次計算
原文地址https://mp.weixin.qq.com/s/S3FfkHYTr3kICFngA_Htpg?spm=a2c4e.11153940.blogcont90243.11.68826711iwPLU8 作者介紹 王峯，淘寶花名”莫
2018-09-05 04:20:33
原创 MyEclipse安裝JS代碼提示（Spket插件）
原文地址： http://blog.csdn.net/zhshulin/article/details/25635883 近期需要大量使用JS來開發，但是MyEclipse2014自帶的JS編輯器沒有代碼提示的功能，開發效率有點低
2018-08-21 23:30:37
原创 Python相關學習資料彙總（轉自http://www.cnblogs.com/maybe2030/p/4552833.html）
是一種面向對象的解釋性的計算機程序設計語言，也是一種功能強大且完善的通用型語言，已經有十多年的發展歷史，成熟且穩定。Python 具有腳本語言中最豐富和強大的類庫，足以支持絕大多數日常應用。 Python語言有非常簡捷、清晰的語法特點，適
2018-08-21 23:30:37
原创 通過Sqoop將Oracle中表導入到HDFS時報錯Error during import: No primary key could be found
我的Sqoop版本是1.4.6，在利用Sqoop將Oracle數據導入到HDFS時候回出現一些異常，因此我們我們要注意以下幾點： sqoop import --connect jdbc:oracle:thin:@
2018-08-21 23:30:36
原创 Java常見異常和解決辦法
1、java.lang.ArithmeticException 算術運算異常,因爲除數爲0，所以引發了算數異常 2、Java.lang.StringIndexOutOfBoundsException: String index
2018-08-21 23:30:36
原创 通過Sqoop工具將Oracle數據庫中的表數據導入到Hive的過程
Sqoop是一款開源的工具主要用於在Hadoop(Hive，HBasw)與傳統的數據庫(mysql、postgresql...)間進行數據的傳遞，可以將一個關係型數據庫（例如 MySQL ,Oracle ,Postgres等）中的數據導
2018-08-21 23:30:36
原创 Sqoop將Oracle數據導入Hive時出現異常 running import job: java.io.IOException: Hive exited with status 1
[root@node2 sqoop-1.4.6]# sqoop import --connect jdbc:oracle:thin:@192.168.8.110:1521:orcl --username
2018-08-21 23:30:36
1
原创 Hadoop HA集羣中主備切換問題
一次意外斷電，Hadoop集羣全部關機，重啓後兩個NameNode節點均是standby狀態， 出現以下問題Operation category READ is not supported in state standby。解決方法
2018-08-21 23:30:36
原创 oracle中的trim函數使用介紹
trim一般都是用在刪除字符串兩邊的空格。實際上，trim也可以用來刪除字符串兩邊的指定字符。並且trim指定刪除的字符串只能是單個字符 Oracle TRIM函數是很常見的函數，下面對Oracle TRIM函數的語法作了詳盡
2018-08-21 23:30:36