memcached緩存mysql查詢結果

介紹一個生產環境中memcached的使用場景，主要是memcached存儲關係型數據庫mysql的查詢結果，比如網站的下載排名等，這種查詢每次從關係型數據庫中查詢，會增加磁盤的I/O開銷，而這個排名不需要實時的更新，所以我們把這個結果存在memcached中，memcached是把數據序列化存放在內存中，我們可以設置超時時間，然後週期性的從關係型數據庫查詢新的結果更新到memcached中。

我用python來寫個小的demo演示這個場景。首先python連接memcached和mysql需要加載對應的模塊。程序的作用就是：先從memcached查詢薪水最高的兩個人，打印他們的姓名和薪水，如果沒有返回結果，說明memcached中不存在，那麼我們從關係型數據庫mysql中去查詢結果，然後更新在memcached中，再次請求，就會從memcached直接返回結果。

安裝python-memcached和MySQL-python包

yum install -y python-memcached  MySQL-python

#!/usr/bin/python
import sys
import MySQLdb
import memcache
memc = memcache.Client(['127.0.0.1:11211'], debug=1);
key = memc.get("top2salary")
if key != None:
        print "Load data from Memcache : %s,%s" % (key[0], key[1])
else:
    print "Updating memcached data from MySQL."
conn = MySQLdb.connect (host = "127.0.0.1",
                            user = "root",
                            passwd = "123456",
                            db = "web_user")
cursor = conn.cursor()
cursor.execute('select * from emp order by salary desc limit 2')
rows = cursor.fetchall()
memc.set('top2salary',rows,10)

mysql的emp表查詢結果：

mysql> select * from emp;
+--------------+--------+
| name         | salary |
+--------------+--------+
| Casillas     | 10500  |
| Fernández    | 350    |
| Varane       | 21000  |
| Pepe         | 16000  |
| Ramos        | 35000  |
| Nacho        | 4400   |
| Coentro      | 12500  |
| Marcelo      | 22000  |
| Carvajal     | 10500  |
| Arbeloa      | 6200   |
| Khedira      | 19500  |
| Casemiro     | 5300   |
| Xabi Alonso  | 10500  |
| Modric       | 35000  |
| Illarramendi | 16000  |
| Isco         | 31000  |
| Bale         | 70500  |
| Di María     | 26500  |
| Ronaldo      | 88000  |
| Jesé         | 13000  |
| Benzema      | 30000  |
| Morata       | 10500  |
+--------------+--------+
22 rows in set (0.00 sec)

查詢當前薪水排名的兩人，第一次執行memcached爲空，立刻去myql中查詢，緩存在memcached，再次查都是從memcached返回，我在代碼裏設置超時時間10秒，10秒後清除緩存再次從mysql查詢，如果這個時間段內mysql有新的數據變化，如插入更高薪水的人，那麼會返回當前最新的結果，一般mysql被緩存在memcached中都是變化不太頻繁的結果。

[root@localhost ~]# ./memc.py
Updating memcached data from MySQL.
[root@localhost ~]# ./memc.py
Load data from Memcache : ('Ronaldo', '88000'),('Bale', '70500')
[root@localhost ~]# ./memc.py
Load data from Memcache : ('Ronaldo', '88000'),('Bale', '70500')
[root@localhost ~]# ./memc.py
Load data from Memcache : ('Ronaldo', '88000'),('Bale', '70500')

優點如果加載網頁每次都查詢mysql而且執行order by這樣的sql語句對數據庫的I/O負載增加，同時會減慢打開頁面的速度。