python的memcache模块连接速度测试
jkiu
10年前
python的memcache模块测试,包含python-libmemcached,python-memcache和pylibmc。
三者区别:
python-libmemcached:是对libmemcached接口的封装,pypi上至今还是dev版,豆瓣以前对此修改使用。
pylibmc:也是对libmemcached接口的封装。
python-memcache:是纯python实现(听说有内存泄露)。
另外前两者没有遍历memcached的接口(get_stats函数实现不一样)
测试环境:
ubuntu 14 64
4 * Intel(R) Core(TM) i5-3470 CPU @ 3.20GH
8G RAM
客户端使用单连接。
测试脚本:
# -*- coding: utf-8 -*- import time test_vaule = '~!@#$%^&*(' * 10 num = 10000 def test_mem(mc): t1 = time.clock() for i in xrange(num): mc.set(str(i), test_vaule) t2 = time.clock() for i in xrange(num): mc.get(str(i)) t3 = time.clock() print('%d set/s.' % (num / (t2 - t1))) print('%d get/s.' % (num / (t3 - t2))) if __name__ == '__main__': import pylibmc mc = pylibmc.client.Client(['127.0.0.1:11211']) print('test for %s %s' % (pylibmc.__name__, pylibmc.__version__)) test_mem(mc) import memcache print('test for %s %s' % (memcache.__name__, memcache.__version__)) mc = memcache.Client(['127.0.0.1:11211']) test_mem(mc) import cmemcached print('test for %s %s' % (cmemcached.__name__, cmemcached.VERSION)) mc = cmemcached.Client(['127.0.0.1:11211']) test_mem(mc)
测试结果:
root@ubuntu:~/workspace# python test_mem.py test for pylibmc 1.4.1 45783 set/s. 51379 get/s. test for memcache 1.53 26295 set/s. 25974 get/s. test for cmemcached 0.40 40135 set/s. 44864 get/s.
结果:
pylibmc 和 python-libmemcached相近,比python-memcache快1倍左右。
速度 pylibmc > python-libmemcached> python-memcache。
备注:当set值为python dict时, python-libmemcached>pylibmc