原创 談Hadoop的C++擴展

原文:http://blog.sina.com.cn/s/blog_6e273ebb0100pid0.html 長期一來,Hadoop因爲其Java實現帶來的性能問題而飽受爭議,同時也涌現了很多方案來緩解這一問題。 Jeff Hammer

原创 [php]mail函數發送郵件(正文+附件+中文)

<?php $from = "[email protected]"; $to = "[email protected], [email protected]"; $subject = "郵件主題"; $subject = "=?UTF-8?B?".base64_encode($

原创 php多進程

<?php //consant $PHP_SCRIPT = "/usr/local/bin/php"; $TASK_FILENAME = "check_apk.php"; $PROCESS_COUNT = 10; //start

原创 mapreduce數據統計實戰總結

問題: 日誌文件是從若干臺線上服務器用工具自動同步到HDFS,  每天幾百G,  要統計某個字段的出現次數. 先後嘗試過以下方法: 1.最初是用php寫的mapreduce腳本.  少量測試文件ok, 但真正那hdfs中日誌跑起來, 內

原创 [php]通過http post發送json數據

function http_post_data($url, $data_string) { $ch = curl_init(); curl_setopt($ch, CURLOPT_POST, 1);

原创 通過ruby-build安裝ruby&rubygem環境

mkdir ~/temp/ cd    ~/temp/ #可能會因爲openssl的版本問題,提示 undefined symbol: EC_GROUP_new_curve_GF2m, 實測採用 open

原创 Linux主機信任關係配置(無密碼登陸)

要用賬號syncData在主機A(被信任機 hostnam.of.A)和主機B(授權機 hostnam.of.B )之間建立信任關係 1、主機A(被信任機)用ssh-keygen -t rsa生成公鑰,公鑰在當前用戶的主文件夾下

原创 PHP漢字轉換爲拼音

項目需要將所有人名按首字母做一個索引, 所以從網上找參考資料, 第一個就可用! 參考1: http://www.oschina.net/code/snippet_166228_17876 已驗證 參考2: http://wenku.bai

原创 Hadoop Hive與Hbase關係 整合

用hbase做數據庫,但由於hbase沒有類sql查詢方式,所以操作和計算數據非常不方便,於是整合hive,讓hive支撐在hbase數據庫層面 的 hql查詢.hive也即 做數據倉庫 1. 基於Hadoop+Hive架構對海量數據進行

原创 linux安裝軟件報錯: Can't locate ExtUtils/Embed.pm in @INC...

安裝snmp服務, 中間報錯: Can't locate ExtUtils/Embed.pm in @INC (@INC contains: /usr/local/lib64/perl5 /usr/local/share/perl5 /u

原创 html+js實現的簡單計算器(加減乘除)

<!DOCTYPE html> <html> <head> <meta http-equiv="Content-Type" content="text/html; charset=utf-8" /> <title></title> </h

原创 shell腳本監控linux網卡流量(上傳/下載/流入/流出)

shell腳本監控linux網卡流量(上傳/下載/流入/流出) 從網上找的一個腳本, diy了一下, 覺得很OK, ~_~ #!/bin/sh#filename: monitor_eth_flow.v2.sh  #功能: 監控網卡進

原创 Hadoop Hive sql語法詳解

Hive 是基於Hadoop 構建的一套數據倉庫分析系統,它提供了豐富的SQL查詢方式來分析存儲在Hadoop 分佈式文件系統中的數據,可以將結構 化的數據文件映射爲一張數據庫表,並提供完整的SQL查詢功能,可以將SQL語句轉換爲Map

原创 phpmysqladmin安裝和配置

參考http://www.tuicool.com/articles/EzMRBfQ nginx配置文件做自定義修改 server { listen 8109; server_name ip_of_server; acces

原创 js獲取url參數

js獲取url參數 <!DOCTYPE html> <html> <body> <script type="text/javascript"> function getParams() { var params = {}; v