我尝试使用python-memcached存储大量密钥时发现了一个问题。 这就是我正在做的事情:
import memcache
# This dict has a 2270 entries that is generated on production server
v = eval(open("/home/dragoon/output").read())
a = memcache.Client(['unix:/tmp/memcached.sock'], debug=1)
接下来我试图设置所有这些值:
In [94]: len(a.set_multi(v))
MemCached: MemCache: unix:/tmp/memcached.sock: timed out. Marking dead.
Out[94]: 2270
memcached服务器的日志输出:
...
27: going from conn_new_cmd to conn_parse_cmd
<27 set d750bde63a98579f9c2987907aaaf5f8 1 0 18
27: going from conn_parse_cmd to conn_nread
> FOUND KEY d750bde63a98579f9c2987907aaaf5f8
>27 STORED
27: going from conn_nread to conn_write
Failed to write, and not due to blocking: Broken pipe
27: going from conn_write to conn_closing
<27 connection closed.
过了一段时间:
In [96]: len(a.set_multi({'test':1}))
Out[96]: 0
In [97]: a.get('test')
Out[97]: 1
默认超时为3秒,但将其增加到100秒也无济于事,memcached刚刚被卡住了。 所以,我的问题是,memcache有什么问题?
我看到有人在谈论存储超过1000,000个条目,但对我来说它甚至不能存储2 000个?
答案 0 :(得分:1)
尝试使用pylibmc作为你的memcache驱动程序,而不是使用python-memcache
我也在Ubuntu 11上看过Memcache 1.4.7上的这个问题。
答案 1 :(得分:0)
确定。似乎memcached 1.4.2中存在一些错误,它是Ubuntu 10.04 LTS中的最后一个版本。 Memcached 1.4.5工作正常。