以下主要介紹Amoeba for mysql:
Amoeba for MySQL致力於MySQL的分佈式數據庫前端代理層,它主要在應用層訪問MySQL的時候充當query 路由功能,與注 分佈式數據庫 proxy 開發。座落不Client、DBServer(s)之間。對客戶端透明。具有負載均衡、高可用性、Query過濾、讀寫分離、可路由相關的query到目標數據庫、可併發請求多臺數據庫 合併結果。 在Amoeba上面你能夠完成多數據源的高可用、負載均衡、數據切片的功能。目前在很多企業的生產線上面使用。
那麼Amoeba for mysql 對客戶端程序來說是什麼呢?我們就當它是mysql吧,它是一個虛擬的mysql,對外提供mysql協議。客戶端連接amoeba就象連接mysql一樣。在amoeba內部需要配置相關的認證屬性。
Amoeba for mysql與Mysql Proxy 的比較:
在MySQL proxy 6.0版本上面如果想要讀寫分離並丏 讀集羣、寫集羣 機器比較多情況下,用mysql proxy 需要相當大的工作量,目前mysql proxy沒有現成的 lua腳本。mysql proxy根本沒有配置文件, lua腳本就是它的全部,當然lua是相當方便的。那麼同樣這種東西需要編寫大量的腳本才能完成一 個複雜的配置。而Amoebafor Mysql只需要進行相關的配置就可以滿足需求。
Amoeba for MySQL的優點:
1. 降低數據切分帶來的複雜多數據庫結構
2. 提供切分規則並降低數據切分規則給應用帶來的影響
3. 降低db 不客戶端的連接數
4. 讀寫分離
Amoeba for MySQL的缺點:
1. Amoeba for MySQL不支持事務:其實,分佈式事務的問題是所有數據庫中間層普遍面臨的問題,不是Amoeba獨有的問題;目前通常的解決辦法是,將事務拆分成幾個單數據庫內的小事務,由應用程序進行總控。
2. Amoeba for MySQL不支持跨節點JOIN:同樣,這個問題也不是Amoeba獨有的,通常的解決辦法是由應用程序先從一個節點取出數據,然後由應用程序去其他節點JOIN。
3. Amoeba for MySQL不支持跨節點排序:這個問題也不是Ameoba獨有的,通常的解決辦法是由應用程序從多個節點中取出數據,然後進行排序。
4. Amoeba for MySQL不適合返回大量(超過10萬)數據的查詢。
5. Amoeba for MySQL不支持分庫分表,只能做到分數據庫實例。
爲何使用Amoeba :
隨着傳統的數據庫技術日趨成熟、計算機網絡技術的飛速發展和應用範圍的擴充,數據庫應用已經普遍建立於計算機網絡之上。這時集中式數據庫系統表現出它的不足:集中式處理,勢必造成性能瓶頸;應用程序集中在一臺計算機上運行,一旦該計算機發生故障,則整個系統受到影響,可靠性不高;集中式處理引起系統的規模 和配置都不夠靈活,系統的可擴充性差。在這種形勢下,集中式數據庫將向分佈式數據庫發展。而Amoeba的透明、簡易配置及多個優點使其成爲分佈式數據庫 代理產品中的優秀選擇。
1.下載jdk和amoeba
amoeba-mysql-binary-2.2.0.tar.gz
jdk-7u71-linux-x64.tar.gz
2.解壓jdk並添加環境變量
mkdir /Amoeba
mv jdk-7u71-linux-x64.tar.gz /Amoeba/
cd /Amoeba/
tar xf jdk-7u71-linux-x64.tar.gz
vi /etc/profile ///添加環境變量
JAVA_HOME=/Amoeba/jdk1.7.0_71
export JAVA_HOME
PATH=$JAVA_HOME/bin:$PATH
export PATH
CLASSPATH=.:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar:$CLASSPATH
export CLASSPATH
source /etc/profile
java -version
cd /usr/local/
mkdir amoeba
tar xf amoeba-mysql-binary-2.2.0.tar.gz -Camoeba
cd amoeba
chmod -R +x bin
cd conf/
Amoeba for MySQL的使用是很簡單的,主要是通過xml文件來實現的。
1. 配置文件介紹:
(1.) dbServers.xml 想象Amoeba作爲數據庫代理層,它一定會和很多數據庫保持通信,因此它必須知道由它代理的數據庫如何連接,比如最基礎的:主機IP、端口、 Amoeba使用的用戶名和密碼等等。這些信息存儲在$AMOEBA_HOME/conf/dbServers.xml中。
(2.) rule.xml Amoeba爲了完成數據切分提供了完善的切分規則配置,爲了瞭解如何分片數據、如何將數據庫返回的數據整合,它必須知道切分規則。不切分規則相關的信息存儲在$AMOEBA_HOME/conf/rule.xml中。
(3.) functionMap.xml 當我們書寫SQL來操作數據庫的時候,常常會用到很多不同的數據庫函數,比如:UNIX_TIMESTAMP()、SYSDATE()等等。這些函數如 何被Amoeba解析呢?$AMOEBA_HOME/conf/functionMap.xml描述了函數名和函數處理的關係。
(4.) ruleFunctionMap.xml 對$AMOEBA_HOME/conf/rule.xml進行配置時,會用到一些我們自己定義的函數,比如我們需要對用戶ID求HASH值來切分數據, 這些函數在$AMOEBA_HOME/conf/ruleFunctionMap.xml中定義。
(5.) access_list.conf Amoeba可以制定一些可訪問以及拒絕訪問的主機IP地址,這部分配置在$AMOEBA_HOME/conf/access_list.conf中。
(6.) log4j.xml Amoeba允許用戶配置輸出日誌級別以及方式,配置方法使用log4j的文件格式,文件是$AMOEBA_HOME/conf/log4j.xml。其中,我們主要用到dbServer.xml 和 amoeba.xml 。
主要配置dbServers.xml, amoeba.xml
amoeba.xml 的認證模塊
<propertyname="authenticator">
<beanclass="com.meidusa.amoeba.mysql.server.MysqlClientAuthenticator">
<propertyname="user">root</property> ///客戶端登錄到amoeba上的用戶
<propertyname="password">123456</property> ///密碼
<property name="filter">
<beanclass="com.meidusa.amoeba.server.IPAccessController">
<propertyname="ipFile">${amoeba.home}/conf/access_list.conf</property>
</bean>
</property>
</bean>
</property>
讀寫分離模塊
<!-- read write -->
<propertyname="writePool">server1</property>
<propertyname="readPool">multiPool</property>
<propertyname="needParse">true</property>
切記 <!-- -->中間默認註釋
dbServers.xml認證模塊
<!--mysql port --> ///登錄到後端數據庫的端口
<propertyname="port">3306</property>
<!--mysql schema -->
<propertyname="schema">paixian</property> ///庫
<!--mysql user -->
<propertyname="user">root</property> ///用戶
<!-- mysql password -->
<propertyname="password">123456</property> ///密碼(!!!!默認被註釋)
dbServers.xml中後端數據庫ip
<dbServer name="server1" parent="abstractServer">
<factoryConfig>
<!-- mysql ip -->
<propertyname="ipAddress">192.168.1.134</property>
</factoryConfig>
</dbServer>
dbServers.xml中數據庫池
<dbServername="multiPool" virtual="true">
<poolConfigclass="com.meidusa.amoeba.server.MultipleServerPool">
<!-- Load balancingstrategy: 1=ROUNDROBIN , 2=WEIGHTBASED , 3=HA-->
<propertyname="loadbalance">1</property> ///算法
<!-- Separated bycommas,such as: server1,server2,server1 -->
<propertyname="poolNames">server1,server2</property>///池中的數據庫
</poolConfig>
</dbServer>
後端服務器授權給amoeba,amoeba授權給後端客戶端
其中遇到的問題
The stack size specified is too small,Specify at least 228k
Error: Could not create the Java VirtualMachine.
Error: A fatal exception has occurred.Program will exit.
解決辦法:
# vim /usr/local/amoeba/bin/amoeba
#DEFAULT_OPTS="-server-Xms256m -Xmx256m -Xss128k"註釋
DEFAULT_OPTS="-server-Xms256m -Xmx256m -Xss256k"增加
java.util.NoSuchElementException: Could notcreate a validated object, cause: ValidateObject failed(ameoba)
015-09-24 15:48:05,561 ERRORnet.MysqlServerConnection - handShake with /192.168.1.135:3306 error:Accessdenied for user 'amoeba'@'192.168.1.136' (using password:NO),hashCode=1541320695
!!!!!!!一個-->註釋的問題,把密碼註釋了