原创 電信行業大數據應用的後盾 MPP架構數據庫技術

在大數據時代,數據呈爆炸式增長,單個SMP系統已經無法應付數據增長所帶來的巨大壓力。隨着網絡技術的發展,PC服務器的“小型化”以及Linux系統的成熟,基於MPP架構的新一代數據庫技術成爲各行業用戶的首選。電信行業作爲國家重點行業,引領

原创 Hadoop導航:版本、生態圈及MapReduce模型

Hadoop版本和生態圈 1. Hadoop版本 (1) Apache Hadoop版本介紹 Apache的開源項目開發流程: 主幹分支:新功能都是在主幹分支(trunk)上開發。特性獨有分支:很多新特性穩定性很差,或者不完善

原创 數據中心優化的5個途徑:軟件定義、雲計算等

軟件定義技術(SDX)及虛擬化。對比幾年前,當下管理程序已得到了長足的發展。機構已實現通過整合關鍵API來減少資源管理的工作量,負載性能也得到了顯著的提高,許多軟件定義技術更是得到了高度的關注(其中包括網絡、存儲等多個方面),甚至已

原创 雲計算時代IT專業人員需具備的10項技能

1. 商業和金融技能 技術和商業的融合始終是成功的絕對法寶,尤其在雲計算時代。 2. 技術技能 自從有了雲計算,企業或者其他機構可以精簡他們的IT資源,卸載大部分的日常系統和應用程序管理,但這並不意味着IT將無所事事,你需要有一項

原创 Hadoop集羣環境下網絡架構的設計與優化

大數據時代,研究大數據的IT 廠商把研究重心放在優化大數據系統軟件架構、優化業務邏輯、優化數據分析算法、優化節點性能等方向,而忽略了大數據環境基礎設置中網絡環節的評估和優化。本文介紹了思科公司在Hadoop 集羣環境下的網絡架構設計與優

原创 HBase在內容推薦引擎系統中的應用

Facebook放棄Cassandra之後,對HBase 0.89版本進行了大量穩定性優化,使它真正成爲一個工業級可靠的結構化數據存儲檢索系統。Facebook的Puma、Titan、ODS時間序列監控系統都使用HBase作爲後端數據存

原创 大數據需要軟件定義存儲

IT基礎設施的方方面面都在朝着更加智能的方向發展,從服務器到網絡再到存儲莫不如此。我們部署了服務器虛擬化,構建了各種自動化的框架以便能夠彈性地適應不斷變化的工作負載,如今又在開始採用SDN來重構整個網絡。而軟件定義存儲(SDS)或許將成

原创 六個超大規模Hadoop部署案例

雖然Hadoop是眼下熱鬧非凡的大數據領域最熱話題,但它肯定不是可以解決數據中心和數據管理方面所有難題的靈丹妙藥。考慮到這一點,我們暫且不想猜測這個平臺未來會如何,也不想猜測各種數據密集型解決方案的開源技術未來會如何,而是關注讓Hado

原创 數據恢復服務商的6個最佳實踐

很多企業利用數據、依靠數據,卻可能對管理數據的方法一無所知。 雖然幾乎所有這些企業都已經有了數據恢復系統,但是在此基礎上,爲數據恢復系統確立一套明確的標準還是很有必要的——這不僅是爲了保證數據的完整性和安全性,也是爲了保證這些企業工作

原创 Hadoop2.2.0 HA + Jdk1.8.0 + Zookeeper3.4.5 + Hbase0.98 集羣搭建詳細過程(服務器集羣)

一、前言 過完年在外實習,實習中的一部分主要工作就是關於hadoop的搭建和維護。其實hadoop的搭建本身並不是什麼難題,主要是當一些之前沒怎麼用過linux、沒怎麼用到java的可憐的孩紙們來搞hadoop的時候會相當的揪

原创 Android數據庫的操作

1、新建類DatabaseHelper繼承SQLiteOpenHelper /**   * SQLiteOpenHelper是一個輔助類,用來管理數據庫的創建和版本他,它提供兩個方面的功能   * 第一,getReadableData

原创 onActivityResult在android中的用法

onActivityResult.java 主要的Activity,一會會先執行此Activity,然後調用B Activity,並向其發送數據,通過回調函數來獲取B傳回來的值。 public class onActivi

原创 Hadoop雖強大,但不是萬能的

注:本文翻譯自 http://www.cyanny.com/2013/12/05/hadoop-isnt-silver-bullet/   Hadoop是一個分佈式海量數據計算的偉大框架。但是,hadoop並不是萬能的。比如,以下場

原创 軟件架構

簡介 軟件體系結構是構建計算機軟件實踐的基礎。與建築師設定建築項目的設計原則和目標,作爲繪圖員畫圖的基礎一樣,一個軟件架構師或者系統架構師陳述軟件構架以作爲滿足不同客戶需求的實際系統設計方案的基礎。 軟件構架是一個容易理解的概念,多

原创 Java模式設計之單例模式

  單例模式在資源管理器中應用。  一些資源管理器常常設計成單例模式。   在計算機系統中,需要管理的資源包括軟件外部資源,譬如每臺計算機可以有若干個打印機,但只能有一個Printer Spooler, 以避免兩個打印作業同時輸出到