Redis-python在一个操作中设置多个键/值



目前我使用基本的mset功能来存储键/值;

from common.redis_client import get_redis_client
cache = get_redis_client()
for k,v in some_dict.items():
   kw = {'key': value}
   cache.mset(kw) 
#later:
   cache.get('key')

我单独存储每个键/值(例如,不在一个 json 中),因为存储整个字典会将其变成一个字符串,并且需要我在存储和检索时序列化/反序列化,我真的需要访问单独的键/值。

我的问题::有没有办法一次mset多个键/值?而不是多次写入 redis 数据库?反之亦然,我可以在一次访问中进行多次读取(获取)吗?(是的 - 我有很多 redis 活动正在进行并且负载很重。我确实关心这个)

在 Agis 评论后更新

如果你使用 Redis-py,这是目前推荐的 Python Redis 客户端,你可以使用流水线,它完全可以做你想要的。下面是一个简单的示例:

>>> r = redis.Redis(...)
>>> r.set('bing', 'baz')
>>> # Use the pipeline() method to create a pipeline instance
>>> pipe = r.pipeline()
>>> # The following SET commands are buffered
>>> pipe.set('foo', 'bar')
>>> pipe.get('bing')
>>> # the EXECUTE call sends all buffered commands to the server, returning
>>> # a list of responses, one for each command.
>>> pipe.execute()
[True, 'baz']

我不知道你使用的是哪个 redis 客户端,但它要么支持流水线,要么你应该考虑切换到 redis-py。

看看关于流水线的 redis 文档;它解释了你可以期待 x5 的性能提升 - 但也不能执行太重要的批量操作(每次执行 10000 个操作是可以的)。

由于您似乎正在寻找存储字典,因此我看到了两种可能的解决方案:

  1. 使用HMGET/HMSET命令。这确实允许从字典中获取和设置多个单独的键。缺点是它都在一个密钥上,因此如果您计划单个字典条目的密钥过期 - 这在缓存中很常见 - 这对您不起作用。

  2. 我决定使用MGETMSET命令。这允许一次设置多个密钥,也可以一次检索它们。您已经在示例中使用了 MSET(多组)命令,但只设置了一个值...

您的示例可能以这种方式工作:

cache.mset(some_dict)

您需要为字典条目添加通用前缀:

cache.mset({'prefix:' + k:v for k,v in some_dict.items()})

这样,您将能够通过按键MGET检索字典条目。如果您事先不知道密钥,可以在之前运行带有"前缀:*"通配符的 KEYS 命令。

最新更新