Django Cache:使用Memcached并回退到FileSystem

时间:2013-03-16 19:28:57

标签: django memcached django-cache

简单问题:

我的服务器有1G内存和10GB磁盘空间

我正在使用per-site cache,我希望尽可能多地使用Memcached,但当空间超出cache will be saved in hard disk时。

(所有网站的页面大约为2GB)

是否有一个简单的配置来实现这个目标?

完全可以做到这一点吗?

由于

2 个答案:

答案 0 :(得分:7)

听起来你希望Memcached在正常RAM时表现得像普通RAM一样。默认情况下它不是,但您可以通过编写自己的缓存后端来模仿它,如@AlexanderAfanasiev所述。实施将是这样的:

首先,定义三个缓存:

CACHES = {
    'default': {
        'BACKEND': 'myapp.cache.DoubleCache',
    },
    'memcached': {
        'BACKEND': 'django.core.cache.backends.memcached.MemcachedCache',
        'LOCATION': '127.0.0.1:11211',
    },
    'filecache': {
        'BACKEND': 'django.core.cache.backends.filebased.FileBasedCache',
        'LOCATION': '/foo/bar',
    }
}

然后,在myapp / cache.py中:

from django.core.cache.backends.base import BaseCache
from django.core.cache import get_cache, cache
mem_cache = get_cache('memcached')
file_cache = get_cache('filecache')

class DoubleCache(BaseCache):

    def get(self, key, default=None, version=None):
        result = mem_cache.get(key, default=default, version=version)
        if result:
            return result
        else:
            return file_cache.get(key, default=default, version=version)

    def set(self, key, value, timeout=None, version=None, client=None, _add_only=False):
        memcache_result = mem_cache.set(key, value, timeout=timeout, version=version, client=client, _add_only=_add_only)
        file_result = file_cache.set(key, value, timeout=timeout, version=version, client=client, _add_only=_add_only)
        return memcache_result

这将始终在两个缓存中存储值。它将从Memcached中检索值,如果未命中,将尝试file_cache。这意味着Memcached可以管理自己的滚降,只有最老的命中才能回退到file_cache。这就是你想要的。

当然,您还必须实现其余的缓存功能,例如delete()get_many()等。希望这能让您走上正确的道路。

答案 1 :(得分:-1)

利用TCP / IP。只需很小的努力,就可以扩展这个逻辑,以创建具有回退功能的漂亮多播后端。

import socket
socket = socket.socket(socket.AF_INET, socket.SOCK_STREAM)

try:
    socket.connect(('127.0.0.1', 11211))
    socket.close()

    CACHES = {
        'default': {
            'BACKEND': 'django.core.cache.backends.memcached.MemcachedCache',
            'LOCATION': '127.0.0.1:11211',
        }
    }
except:
    CACHES = { 
        'default': {
            'BACKEND': 'django.core.cache.backends.filebased.FileBasedCache',
            'LOCATION': '/srv/django_cache',
        }
    }