原创 Hadoop分佈式集羣搭建詳細過程

1. 首先用五臺機器搭建分佈式,一個爲master,剩下四個分別爲slave01、slave02、slave03, slave04。 2. 修改機器名     五臺機器分別都執行sudo vim /etc/hostname命令,將文件中的

原创 OpenCV的數據類型——基礎數據類型

OpenCV有很多數據類型,從組織結構的角度來看,OpenCV的基礎類型類型主要分爲三類。第一類是直接從C++原語中繼承的基礎數據類型;第二類是輔助對象;第三類是大型數據類型。本文主要介紹OpenCV的基礎數據類型。 目錄 Point類

原创 OpenCV繪圖和註釋

OpenCV的繪圖函數可以在任意深度的圖像上工作,但在大多數情況下,它們只對圖像的前三個通道有影響BGR,如果是單通道圖像,則默認隻影響第一個通道。大多數繪圖函數都支持操作對象的顏色、寬度、線型和亞像素對齊等參數。 藝術線條 畫直線或者其

原创 Python中的字典dict

字典是python中唯一的內置映射類型,其中的值不按順序排列,而是存儲在鍵下。鍵不可修改且不能重複的,所以其可能是數字、字符串或元組,而不可能是list。字典中鍵-值對被稱爲項(item),其語法如下: {"Alice": 12, "Be

原创 使用Hadoop自帶的例子wordcount實現詞頻統計

Hadoop中自帶的hadoop-mapreduce-examples-2.7.6.jar含有一些事例,本文將用wordcount實現詞頻統計。具體步驟如下: 1. 啓動Hadoop     切換到Hadoop安裝目錄下的sbin目錄下執

原创 OpenCV高斯濾波GaussianBlur

圖像處理中,常用的濾波算法有均值濾波、中值濾波以及高斯濾波等。 三種濾波器的對比 濾波器種類 基本原理 特點 均值濾波 使用模板內所有像素的平均值代替模板中心像素灰度值 易收到噪聲的干擾,不能完全消除噪聲,只能相對減弱噪聲 中值濾波 計算

原创 使用Hadoop自帶的例子pi計算圓周率

Hadoop中自帶的hadoop-mapreduce-examples-2.7.6.jar含有一些事例,本文將用pi計算圓周率。若想了解其計算原理,參考:http://thinkinginhadoop.iteye.com/blog/710

原创 OpenCV初體驗

OpenCV提供了一些實用工具來讀取從視頻流到攝像機畫面的各種各樣的圖像格式,這些工具都是HighGUI的一部分。下面幾個小例子可以讓初學者提前體驗一下OpenCV的功能。 1. 打開一張圖像並且將其顯示在屏幕上 #include "s

原创 MapReduce分析NCDC 年氣象數據最低溫度與最高溫度

利用hadoop計算技術對採集的氣象數據信息進行處理,主要分兩個階段:mapper階段和reducer階段,mapper階段主要是對日誌文件進行按行讀取並進行字符串截取,reducer階段對mapper階段傳過來的數據進行大小比較,最終獲

原创 Python中的字符串

字符串是序列的一種,因此標準序列操作都適用於字符串,但字符串是不可變的。因此任何元素賦值和切片賦值都是非法的。 1 設置字符串格式     1.1 精簡版 使用字符串格式設置運算符%,其左邊指定一個字符串,右邊指定要設置其格式的值,可爲單

原创 python中序列(列表list和元組tuple)的用法

數據結構是以某種方式(如通過編號)組合起來的數據元素的集合。再python中最基本的數據結構爲序列(sequence)。序列中的元素是有序的,索引從0開始,用負索引表示序列末尾元素的位置。 python中常見的序列有兩種:列表和元組。二者