原创 【hadoop】Hadoop學習筆記(八):如何使用Maven構建《hadoop權威指南3》隨書的源碼包

《hadoop:the definitive guide 3th》中的例子默認提供了一種編譯和構建jar包方法——maven,如果沒有maven你會發現編譯測試隨書的源碼會非常的麻煩(至少在命令行下),當然你也可以使用eclipse導入

原创 【hadoop】Hadoop學習筆記(四):Hadoop中的streaming

Hadoop爲MapReduce提供了一個允許你使用除了java以外的語言編寫map,reduce函數的API:Hadoop Streaming使用標準流(standard streams)作爲Hadoop和應用程序之間傳輸數據的接口。

原创 【android】Android Wi-Fi Direct 開發指南

(本文爲Android官方開發文檔譯文)  轉載自:http://blog.csdn.net/yichigo/article/details/8472570 使用Wi-Fi Direct技術可以讓具備硬件支持的設備在沒有中間接入點

原创 Nginx 配置文件詳解

user nginx ; #用戶 worker_processes 8; #工作進程,根據硬件調整,大於等於cpu核數 error_log logs/nginx_error.log crit; #錯誤

原创 【hadoop】Hadoop學習筆記(九):如何在windows上使用eclipse遠程連接hadoop進行程序開發

由於hadoop主要是部署和應用在linux環境中的,但是目前鄙人自知能力有限,還無法完全把工作環境轉移到linux中去(當然還有點小私心啦,windows下那麼多好用的程序到linux下用不了還真有點心疼——比如說快播,O(∩_∩)O

原创 【hadoop】Hadoop學習筆記(七):使用distcp並行拷貝大數據文件

以前我們介紹的訪問HDFS的方法都是單線程的,Hadoop中有一個工具可以讓我們並行的拷貝大量數據文件,這個工具就是distcp。   distcp的典型應用就是在兩個HDFS集羣中拷貝文件,如果兩個集羣使用的Hadoop版本相同,可

原创 【hadoop】Hadoop學習筆記(一)之示例程序:計算每年的最高溫度MaxTemperature

本《hadoop學習筆記》系列是在《hadoop: the definitive guide 3th》的基礎上通過網上額外蒐集資料和查看hadoop的API再加上自己的實踐方面的理解編寫而成的,主要針對hadoop的特性和功能學習以及H

原创 asp+Access手工注入案例

今天在空間發了篇日誌,問朋友們有沒有什麼需要我這個小菜檢測一下的網站,日誌發出後,有位朋友來留了一個網站的地址: 呵呵,當時聽那朋友說的,他們好多人都不行,拿不下,我被嚇到了,呵呵,想着別人那麼多人都拿不下的站,我一個小菜鳥能拿下? 呵

原创 【hadoop】Hadoop學習筆記(五):一些關於HDFS的基本知識

當某個數據集大大小超出單個物理機的存儲能力時,我們可以考慮使用集羣。管理跨網絡機器存儲的文件系統叫做分佈式文件系統(Distributed FileSystem)。隨着多節點的引入,相應的問題也就出現了,例如其中最重要的一個問題就是如何

原创 MongoDB與內存

來自:http://huoding.com/2011/08/19/107 但凡初次接觸MongoDB的人,無不驚訝於它對內存的貪得無厭,至於箇中緣由,我先講講Linux是如何管理內存的,再說說MongoDB是如何使用內存的,答案自然就

原创 【Linux】Linux平臺Cpu使用率的計算

proc文件系統 /proc文件系統是一個僞文件系統,它只存在內存當中,而不佔用外存空間。它以文件系統的方式爲內核與進程提供通信的接口。用戶和應用程序可以通過/proc得到系統的信息,並可以改變內核的某些參數。由於系統的信息,如進程,是動

原创 手工注入詳解

1.檢測注入點: 一般是在連接的後面添加and 1=1 and 1=2 如果2次返回的頁面不同就意味着存在注入漏洞。 注入點我找好了! 2次返回不一樣,說明存在注入漏洞! 2.猜解表名: 在注入點後面輸入 and(selec

原创 android性能測試工具Emmagee介紹

轉自:http://qa.blog.163.com/blog/static/19014700220126105354565/ Emmagee是基於Android開發的用於測試指定android應用性能的小工具。 Emmagee已開源

原创 【hadoop】Hadoop學習筆記(六):Hadoop讀寫文件時內部工作機制

讀文件    讀文件時內部工作機制參看下圖:   客戶端通過調用FileSystem對象(對應於HDFS文件系統,調用DistributedFileSystem對象)的open()方法來打開文件(也即圖中的第一步),Distri

原创 簡單快速的可用性測試

可用性測試是改善產品的最佳方式之一,這一點,在內部已經是不爭的共識。只是由於用研人手總是不足,所以爲了能讓各個部門的同事能更快速地展開一些研究和測試的工作,我們陸續整理了一些簡單的文檔和教程,並計劃通過集中的培訓來普及一些