原创 Spring Aop 日誌攔截應用
近期，一個小夥伴遇到了此需求。要解決的問題就是： 記錄用戶在系統的操作，通過註解來靈活控制。 註解可以對方法進行修飾，描述。 後面會將註解上描述以及方法被調用時入參記錄到數據庫。 同時還需要對不同的操作進行分類（插入，修改，查看，下載
2020-06-19 17:21:01
原创 eclipse 遠程調試hadoop代碼
zxxJPDA 簡介 Sun Microsystem 的 Java Platform Debugger Architecture (JPDA) 技術是一個多層架構，使您能夠在各種環境中輕鬆調試 Java 應用程序。JPDA 由兩個接口
2020-06-19 16:20:58
原创 Linux負載均衡集羣之LVS原理
一、 LVS簡介 LVS是Linux Virtual Server的簡稱，也就是Linux虛擬服務器, 是一個由章文嵩博士發起的自由軟件項目，它的官方站點是www.linuxvirtualserver.org。現在LVS已經
2020-06-19 16:20:58
原创 HDFS讀取文件步驟
client調用FileSystem.open(),該FileSystem指向的實例是DistrbutedFileSystem（DFS），它通過RPC請求到Namenode.Namenode收到請求後，對於每一個塊返回存有該副本的Data
2020-06-19 16:20:57
原创 iptables 簡單配置示例
iptables防火牆簡介 iptables/netfilter是Linux下自帶的一款免費且優秀的基於包過濾的防火牆工具，它的功能十分強大，使用非常靈活， 可以對流入、流出、流經服務器的數據包進行精細的控制。 iptables是
2020-06-19 16:20:57
原创 HBase shell
進入hbase命令行 ./hbase shell 顯示hbase中的表 list 創建user表，包含info、data兩個列族 create 'user', 'info1', 'data1' create 'use
2020-06-19 15:28:21
原创 SC命令使用(創建window服務等)
//1 sc語法 作爲一個命令行工具，SC.exe可以用來測試你自己的系統，你可以設置一個批處理文件來使用不同的參數調用 SC.exe來控制服務。這個很有用，如果你想看看你的服務不斷的啓動和停止，我沒有試過哦！讓一個服務一下子 打開，
2020-06-19 15:28:21
原创 洞悉linux下的Netfilter&iptables：什麼是Netfilter？
本人研究linux的防火牆系統也有一段時間了，由於近來涉及到的工作比較紛雜，久而久之怕生熟了。趁有時間，好好把這方面的東西總結一番。一來是給自己做個沉澱，二來也歡迎這方面比較牛的前輩給小弟予以指點，共同學習，共同進步。 能在CU上
2020-02-24 00:59:44
3
原创 linux平臺下防火牆iptables原理(轉)
iptables簡介 netfilter/iptables（簡稱爲iptables）組成Linux平臺下的包過濾防火牆，與大多數的Linux軟件一樣，這個包過濾防火牆是免費的，它可以代替昂貴的商業防火牆解決方案，完成封包過濾、
2020-02-24 00:59:44
原创 hbase 概念 + 搭建分佈式HA應用
HBase - Hadoop Database hbase的設計思想來自於google的bigtable 主鍵：Row Key 主鍵是用來檢索記錄的主鍵，訪問Hbase table 中的行，只有三種方式 通過單個Row K
2020-02-24 00:59:44
原创 sqoop 和mysql相關操作
數據遷移工具,可以和RDBMS相互遷移數據 需要先將db driver copy to sqoop lib dir 注意： sqoop是以mapreduce的方式來運行任務的，用hdfs來存儲數據的。所以依賴Name
2020-02-24 00:59:44
原创 HDFS寫文件解析
client通過DistributedFileSystem對象調用create()方法創建文件，實際上通過RPC調用了NameNode的方法。NameNode收到client的請求之後，執行各種檢查（1.確認要傳文件目前在HDFS上不存在
2020-02-24 00:59:44
原创 CentOS6.4配置163的yum源
CentOS系統自帶的更新源的速度實在是慢，爲了讓CentOS6使用速度更快的YUM更新源，可以選擇163（網易）的更新源。 1.下載repo文件 wget http://mirrors.163.com/.help/CentOS6-
2020-02-24 00:59:44
原创 四層和七層負載均衡
簡單理解四層和七層負載均衡:①所謂四層就是基於IP+端口的負載均衡；七層就是基於URL等應用層信息的負載均衡；同理，還有基於MAC地址的二層負載均衡和基於IP地址的三層負載均衡。 換句換說，二層負載均衡會通過一個虛擬MAC地址接收請求，
2020-02-24 00:59:44
原创 hadoop版本與支持的hbase版本對照表
As of Hive 0.9.0 the HBase integration requires at least HBase 0.92, earlier versions of Hive were working with HBase
2020-02-24 00:59:44
3