原创 Linux下提供top、ps命令查看當前cpu、mem使用情況

Linux下提供top、ps命令查看當前cpu、mem使用情況,簡要介紹如下: 一、使用ps查看進程的資源佔用 ps -aux 查看進程信息時,第三列就是CPU佔用。 [root@localhost utx86]# ps -aux |

原创 HBASE 表結構設計

1,對於HBase的存儲設計,要考慮它的存儲結構是:rowkey+columnFamily:columnQualifier+timestamp(version)+value = KeyValue in HBase,一個KeyValue依

原创 hadoop 大數據開發3---HBase 安裝步驟

HBase 安裝步驟     1.配置 hbase 的環境變量     在/root/hbase/conf 目錄下的 hbase-env.sh 中添加 Hbase 需要的環境變量。如下: 下面第四行注意這個值爲 false 時,表示啓動

原创 LVS三種負載均衡方式(VS/NAT、VS/TUN、VS/DR)和 調度算法介紹

LVS LVS是一種集羣(Cluster)技術,採用IP負載均衡技術和基於內容請求分發技術。調度器具有很好的吞吐率,將請求均衡地轉移到不同的服務器上執行,且調度器自動屏蔽掉服務器的故障,從而將一組服務器構成一個高性能的、高可用的虛擬服務器

原创 hadoop pig

本文可以讓剛接觸pig的人對一些基礎概念有個初步的瞭解。 本文大概是互聯網上第一篇公開發表的且涵蓋大量實際例子的Apache Pig中文教程(由Google搜索可知),文中的大量實例都是作者Darran Zhang(website:

原创 集羣session共享方案

轉博友的比較有用參考文章:使用Spring Session做分佈式會話管理,分佈式應用session會話管理-基於redis說在前面:由於這篇文章參考了別人的,自己也總結了,所以很不要臉的把這篇文章標爲了原創(捂臉)。但是參考的文章都寫在

原创 log4j日誌輸出性能優化-緩存、異步

1、log4j已成爲大型系統必不可少的一部分,log4j可以很方便的幫助我們在程序的任何位置輸出所要打印的信息,便於我們對系統在調試階段和正式運行階段對問題分析和定位。由於日誌級別的不同,對系統的性能影響也是有很大的差距,日誌級別越高,

原创 做項目被log4j的輸出格式化參數搞煩了,索性把API的相關部分大致翻譯一下,原文參見 ----轉載

http://logging.apache.org/log4j/docs/api/org/apache/log4j/PatternLayout.html    參數 說明 例子 %c 列出logger名字空間的全稱,如果加上{<層數>

原创 不錯的數據收集

目錄[-] (一)hadoop 相關安裝部署 (二)hive (三)pig (四)hadoop原理與編碼 (五)數據倉庫與挖掘 (六)Oozie工作流 (七)HBase (八)flume (九)sqoop (十)ZooKeeper

原创 淘寶HBASE基礎介紹

hbase介紹 hbase 介紹 一、簡介 history  started by chad walters and jim 2006.11 G release paper on BigTable 2007.2 inita

原创 linux yum 安裝

 今天工作中,用yum源安裝包時無意遇到的。 Loaded plugins: product-id, refresh-packagekit, security, subscription-manager Updating certi

原创 pinpoint

http://blog.csdn.net/u014091123/article/details/74002463 http://blog.csdn.net/xiaozhuanddapang/article/details/7622

原创 hadoop 編譯jar包和運行

hadoop 編輯通過編譯jar包方法: 1.建立存放編譯java class類文件       mkdir wordcount_classes           2.使用javac 編譯 mapreduce java類  

原创 HBASE+HADOOP --2

hive-0.7.1 hbase-0.90.3           hadoop-0.20.203.0   三個NODE 在有了HBASE+HADOOP之後,數據的統計成了問題,MAP REDUCE是我們想用的功能,藉助HIVE來

原创 WebRTC現狀及實現概要

1 引言 1.1 編寫目的 本文講述瀏覽器引入 WebRTC(Web Real-Time Communication) 技術的必要性、WebRTC現狀及實現方法。 2011 年以前,瀏覽器之間要實現實時通信需要私有技術,這些技術