原创 HPC系統體系架構

 HPC系統體系架構 名詞解釋 HPC-High Performance Computing or High Performance Clustering COW-Cluster of Workstations NOW-Network of

原创 OpenStack塊存儲nova-volume工作機制和相關問題

對swift對象存儲的內部原理和相關技術可以查找對象存儲、一致性哈希等文章,新浪有幾篇技術分享介紹的很好,推薦看一看。一、相關概念LVM存儲常用術語物理存儲介質(Physical Media):物理存儲設備,如磁盤或者磁盤上的分區,是存儲系

原创 構建OpenStack的高可用性(HA,High Availability)

1、CAP理論1) CAP 理論給出了3個基本要素:一致性 ( Consistency) :任何一個讀操作總是能讀取到之前完成的寫操作結果;可用性 ( Availability) :每一個操作總是能夠在確定的時間內返回;分區可容忍性 (To

原创 linux網橋淺析

   什麼是橋接?    簡單來說,橋接就是把一臺機器上的若干個網絡接口“連接”起來。其結果是,其中一個網口收到的報文會被複制給其他網口併發送出去。以使得網口之間的報文能夠互相轉發。交換機就是這樣一個設備,它有若干個網口,並且這些網口是橋

原创 比特幣的原理及運作機制

在這篇文章中我會給出一個虛擬的村莊叫“比特村”,整個文章會以講故事的方式,逐步告訴大家比特幣提出的動機、解決了什麼問題以及一些關鍵組件的目標和設計方案。 問題的提出 我們先從比特幣產生的動機開始。 以物易物的比特村 話說

原创 openstack常見錯誤總結

以下主要爲安裝部署過程中遇到的一些問題,因爲openstack版本問題,帶來的組件差異導致不同的版本安裝的方法也完全不一樣。經過測試,目前已可成功部署Essex和Grizzly兩個版本,其中間還有個版本是Folsom,這個版本沒有部署成功

原创 比特幣的原理及運作機制

在這篇文章中我會給出一個虛擬的村莊叫“比特村”,整個文章會以講故事的方式,逐步告訴大家比特幣提出的動機、解決了什麼問題以及一些關鍵組件的目標和設計方案。 問題的提出 我們先從比特幣產生的動機開始。 以物易物的比特村 話說

原创 Hadoop單點部署與案例開發(微博用戶數據分析)

一、環境搭建1、Hadoop運行環境搭建1.1 安裝虛擬機(1)下載並安裝VMware虛擬機軟件。(2)創建虛擬機,實驗環境虛擬機配置如下圖所示。(3)安裝Ubuntu系統,安裝結果如下圖所示。1.2  配置JDK環境下載並安裝JDK,安裝

原创 網格聚類算法綜述

網格聚類算法綜述(1)STINGSTING(Statistical Information Grid)是一種基於網格的多分辨率聚類技術它將空間區域劃分爲矩型單元。針對不同級別的分辨率,通常存在多個級別的矩形單元,這些單元形成了一個層次結構;

原创 網絡橋接簡介及設置

Bridging Ethernet Connections (as of Ubuntu 12.04: September 2012)These instructions work for Ubuntu 12.04 and some earl

原创 OpenStack cinder命令集合

1、#cinder help  獲得幫助信息,列出所有命令。2、[root@wi115-10 ~]# cinder absolute-limits     +-------------------------+-------+     |

原创 對象存儲文件系統簡介

一、引言    高性能計算已由傳統的主機方式逐漸向集羣方式演變,如TOP500中,1998年只有2臺系統是集羣方式,而到2003年已有208臺爲集羣系統。隨着高性能計算體系結構的發展變化,傳統的基於主機的存儲架構已成爲新的瓶頸,不能滿足集羣

原创 openstack常見錯誤總結

以下主要爲安裝部署過程中遇到的一些問題,因爲openstack版本問題,帶來的組件差異導致不同的版本安裝的方法也完全不一樣。經過測試,目前已可成功部署Essex和Grizzly兩個版本,其中間還有個版本是Folsom,這個版本沒有部署成功

原创 OpenStack單點部署及使用簡單教程(附:部署好的VMware虛擬機)

OpenStack單點部署及使用簡單教程1環境操作系統:ubuntu-12.04-server2軟件工具1.ssh客戶端,用來遠程連接服務器。如果是通過Windows的命令行工具來訪問,則需要安裝xshell這個軟件。http://pan.

原创 linux網橋淺析

   什麼是橋接?    簡單來說,橋接就是把一臺機器上的若干個網絡接口“連接”起來。其結果是,其中一個網口收到的報文會被複制給其他網口併發送出去。以使得網口之間的報文能夠互相轉發。交換機就是這樣一個設備,它有若干個網口,並且這些網口是橋