目前我使用基本的mset
功能来存储键/值;
from common.redis_client import get_redis_client
cache = get_redis_client()
for k,v in some_dict.items():
kw = {'key': value}
cache.mset(kw)
#later:
cache.get('key')
我单独存储每个键/值(例如,不在一个 json 中),因为存储整个字典会将其变成一个字符串,并且需要我在存储和检索时序列化/反序列化,我真的需要访问单独的键/值。
我的问题::有没有办法一次mset
多个键/值?而不是多次写入 redis 数据库?反之亦然,我可以在一次访问中进行多次读取(获取)吗?(是的 - 我有很多 redis 活动正在进行并且负载很重。我确实关心这个)
在 Agis 评论后更新
如果你使用 Redis-py,这是目前推荐的 Python Redis 客户端,你可以使用流水线,它完全可以做你想要的。下面是一个简单的示例:
>>> r = redis.Redis(...)
>>> r.set('bing', 'baz')
>>> # Use the pipeline() method to create a pipeline instance
>>> pipe = r.pipeline()
>>> # The following SET commands are buffered
>>> pipe.set('foo', 'bar')
>>> pipe.get('bing')
>>> # the EXECUTE call sends all buffered commands to the server, returning
>>> # a list of responses, one for each command.
>>> pipe.execute()
[True, 'baz']
我不知道你使用的是哪个 redis 客户端,但它要么支持流水线,要么你应该考虑切换到 redis-py。
看看关于流水线的 redis 文档;它解释了你可以期待 x5 的性能提升 - 但也不能执行太重要的批量操作(每次执行 10000 个操作是可以的)。
由于您似乎正在寻找存储字典,因此我看到了两种可能的解决方案:
-
使用
HMGET
/HMSET
命令。这确实允许从字典中获取和设置多个单独的键。缺点是它都在一个密钥上,因此如果您计划单个字典条目的密钥过期 - 这在缓存中很常见 - 这对您不起作用。 -
我决定使用
MGET
和MSET
命令。这允许一次设置多个密钥,也可以一次检索它们。您已经在示例中使用了MSET
(多组)命令,但只设置了一个值...
您的示例可能以这种方式工作:
cache.mset(some_dict)
您需要为字典条目添加通用前缀:
cache.mset({'prefix:' + k:v for k,v in some_dict.items()})
这样,您将能够通过按键MGET
检索字典条目。如果您事先不知道密钥,可以在之前运行带有"前缀:*"通配符的 KEYS
命令。