Gearman

Gearman是一個分發任務的程序框架，可以用在各種場合，與Hadoop相 比，Gearman更偏向於任務分發功能。它的任務分佈非常簡單，簡單得可以只需要用腳本即可完成。Gearman最初用於LiveJournal的圖片 resize功能，由於圖片resize需要消耗大量計算資源，因此需要調度到後端多臺服務器執行，完成任務之後返回前端再呈現到界面。

通常，多語言多系統之間的集成是個大問題，一般來說，人們多半會採用WebService的方式來處理此類集成問題，但不管採用何種風格的WebService，如RPC風格，或者REST風格，其本身都有一定的複雜性。相比之下，Gearman也能實現類似的作用，而且更簡單易用。

一個Gearman請求的處理過程涉及三個角色：Client -> Job -> Worker。

Client：請求的發起者，可以是C，PHP，Perl，MySQL UDF等等。
Job：請求的調度者，用來負責協調把Client發出的請求轉發給合適的Work。
Worker：請求的處理者，可以是C，PHP，Perl等等。

因爲Client，Worker並不限制用一樣的語言，所以有利於多語言多系統之間的集成。

甚至我們通過增加更多的Worker，可以很方便的實現應用程序的分佈式負載均衡架構。

下面看看如何安裝運行一個例子，條件所限，我們把Client，Job，Worker三個角色運行在一臺服務器上：

安裝Gearman server and library：

wget http://launchpad.net/gearmand/trunk/0.8/+download/gearmand-0.8.tar.gz
tar zxf gearmand-0.8.tar.gz
cd gearmand-0.8
./configure
make
make install

安裝Gearman PHP extension：

wget http://pecl.php.net/get/gearman-0.4.0.tgz
tar zxf gearman-0.4.0.tgz
cd gearman-0.4.0
phpize
./configure
make
make install

編輯php.ini配置文件加載相應模塊並使之生效：

extension = "gearman.so"

啓動Job：

gearmand -d

如果當前用戶是root的話，則需要這樣操作：

gearmand -d -u root

缺省會使用4730端口，下面會用到。

注意：如果找不到gearmand命令的路徑，別忘了用whereis gearmand確認。

編寫Worker：

worker.php文件內容如下：

<?php
$worker= new GearmanWorker();
$worker->addServer('127.0.0.1', 4730);
$worker->addFunction('reverse', 'my_reverse_function');

while ($worker->work());

function my_reverse_function($job)
{
return strrev($job->workload());
}
?>

設置後臺運行work：

php worker.php &

編寫Client：

client.php文件內容如下：

<?php
$client= new GearmanClient();
$client->addServer('127.0.0.1', 4730);
echo $client->do('reverse', 'Hello World!'), "\n";
?>

運行client：

php client.php

輸出：!dlroW olleH

出 於方便的考慮，Worker，Client使用的都是PHP，但這並不影響演示，實際應用中，你完全可以通過Gearman集成不同語言實現的 Worker，Client。或許此時你還想了解前面提到的負載均衡功能：很簡單，只要增加多個Worker即可，你可以按照worker.php的樣子 多寫幾個類似的文件，並設置不同的返回值用以識別演示效果。然後依次啓動這幾個Worker文件，並多次使用client.php去請求，你就會發現 Job會把Client請求轉發給不同的Worker。

命令行工具

如果你覺得安裝PHP之類的東西太麻煩的話，你也可以僅僅通過命令行工具來體驗Gearman的功能：

啓動Worker：gearman -w -f wc -- wc -l &
運行Client：gearman -f wc < /etc/passwd

Gearman都能用來幹什麼？
Gearman 可以用在各個方面，最簡單就是在不同語言之間架起一座橋樑。比如你可能希望你的php程序調用一個c 函數，那麼用gearman就可以實現了，當然了實際你可以通過寫一個php擴展來實現同樣的工作，但是比如你要php調用java,perl,或者 python那麼，Gearman就非常棒了。

Gearman另一個應用方面是負載分擔，你可以將worker放在不同的服務器（或者一些 列服務器）上，比如你的php程序需要圖片轉換，但是不希望本地服務器有太多的這樣圖片轉換的進程，那麼你可以建立一系列服務器，在上面加載worker 處理圖片轉換。這樣你的web服務器將不受圖片轉換的影響，同時你得到了負載均衡的功能，因爲job server會在請求到來的時候，將這個請求發給空閒的worker.同樣對於多核的服務器，你可以在同一機器上創建同樣數目的worker. 你可能擔心，job server處於一箇中心，那麼這會是一個單點的瓶頸，如果死了，會怎麼樣？對於這樣的情況，你可以運行多個job server。這樣如果一個job server down了，client和worker會自動遷移到另一臺job server上。

Gearman範例在官網可找到：
slides:
http://gearman.org/index.php?id=presentations
use cases:
http://gearman.org/index.php?id=use_cases

具體可以參考官方文檔，還有一些不錯的PDF。

轉載地址：http://blog.163.com/lgh_2002/blog/static/44017526201281394856306/