原创 談Hadoop的C++擴展
原文:http://blog.sina.com.cn/s/blog_6e273ebb0100pid0.html 長期一來,Hadoop因爲其Java實現帶來的性能問題而飽受爭議,同時也涌現了很多方案來緩解這一問題。 Jeff Hammer
原创 [php]mail函數發送郵件(正文+附件+中文)
<?php $from = "[email protected]"; $to = "[email protected], [email protected]"; $subject = "郵件主題"; $subject = "=?UTF-8?B?".base64_encode($
原创 php多進程
<?php //consant $PHP_SCRIPT = "/usr/local/bin/php"; $TASK_FILENAME = "check_apk.php"; $PROCESS_COUNT = 10; //start
原创 mapreduce數據統計實戰總結
問題: 日誌文件是從若干臺線上服務器用工具自動同步到HDFS, 每天幾百G, 要統計某個字段的出現次數. 先後嘗試過以下方法: 1.最初是用php寫的mapreduce腳本. 少量測試文件ok, 但真正那hdfs中日誌跑起來, 內
原创 [php]通過http post發送json數據
function http_post_data($url, $data_string) { $ch = curl_init(); curl_setopt($ch, CURLOPT_POST, 1);
原创 通過ruby-build安裝ruby&rubygem環境
mkdir ~/temp/ cd ~/temp/ #可能會因爲openssl的版本問題,提示 undefined symbol: EC_GROUP_new_curve_GF2m, 實測採用 open
原创 Linux主機信任關係配置(無密碼登陸)
要用賬號syncData在主機A(被信任機 hostnam.of.A)和主機B(授權機 hostnam.of.B )之間建立信任關係 1、主機A(被信任機)用ssh-keygen -t rsa生成公鑰,公鑰在當前用戶的主文件夾下
原创 PHP漢字轉換爲拼音
項目需要將所有人名按首字母做一個索引, 所以從網上找參考資料, 第一個就可用! 參考1: http://www.oschina.net/code/snippet_166228_17876 已驗證 參考2: http://wenku.bai
原创 Hadoop Hive與Hbase關係 整合
用hbase做數據庫,但由於hbase沒有類sql查詢方式,所以操作和計算數據非常不方便,於是整合hive,讓hive支撐在hbase數據庫層面 的 hql查詢.hive也即 做數據倉庫 1. 基於Hadoop+Hive架構對海量數據進行
原创 linux安裝軟件報錯: Can't locate ExtUtils/Embed.pm in @INC...
安裝snmp服務, 中間報錯: Can't locate ExtUtils/Embed.pm in @INC (@INC contains: /usr/local/lib64/perl5 /usr/local/share/perl5 /u
原创 html+js實現的簡單計算器(加減乘除)
<!DOCTYPE html> <html> <head> <meta http-equiv="Content-Type" content="text/html; charset=utf-8" /> <title></title> </h
原创 shell腳本監控linux網卡流量(上傳/下載/流入/流出)
shell腳本監控linux網卡流量(上傳/下載/流入/流出) 從網上找的一個腳本, diy了一下, 覺得很OK, ~_~ #!/bin/sh#filename: monitor_eth_flow.v2.sh #功能: 監控網卡進
原创 Hadoop Hive sql語法詳解
Hive 是基於Hadoop 構建的一套數據倉庫分析系統,它提供了豐富的SQL查詢方式來分析存儲在Hadoop 分佈式文件系統中的數據,可以將結構 化的數據文件映射爲一張數據庫表,並提供完整的SQL查詢功能,可以將SQL語句轉換爲Map
原创 phpmysqladmin安裝和配置
參考http://www.tuicool.com/articles/EzMRBfQ nginx配置文件做自定義修改 server { listen 8109; server_name ip_of_server; acces
原创 js獲取url參數
js獲取url參數 <!DOCTYPE html> <html> <body> <script type="text/javascript"> function getParams() { var params = {}; v