Python 的 dict.get 默认值,为什么命中缓存也会计算
Python 的 dict.get 默认值,为什么命中缓存也会计算
给脚本增加一层缓存时,很容易写出 cache.get(key, build_value())。这行代码看起来像“缓存里没有才计算”,实际上,即使键已经存在,build_value() 也会先执行。如果计算包含文件读取、数据库查询或日志输出,就会出现多余开销,甚至在缓存命中时仍然报错。
用一个零值命中说明问题
def build_value():
print("执行计算")
return 42
cache = {"answer": 0}
result = cache.get("answer", build_value())
print(result)
输出是:
执行计算
0
get 返回了已有的 0,但默认值表达式已经求值。Python 在调用方法前,会先计算参数;dict.get 接收到的是计算后的结果,无法决定是否推迟这次计算。
cache.setdefault(key, build_value()) 同样会提前求值。它与 get 的区别是:缺键时会把默认值插入字典;已有键时仍会先计算这个参数。把方法名换成 setdefault,并不能解决昂贵默认值的问题。
缺键时再计算,并明确是否写回
对普通字典,最直观的写法是显式分支:
if "answer" not in cache:
cache["answer"] = build_value()
result = cache["answer"]
这样只有缺键才调用函数,而且成功计算后会写回缓存。若需求只是提供本次调用的兜底值,不希望改变字典,就在缺键分支赋给局部变量,不执行写回。
不要改成 cache.get(key) or build_value():0、False、空字符串和 None 都会进入右侧表达式。它表达的是“已有值为假时使用兜底”,不是“键不存在时使用兜底”。只有业务明确把所有假值都视为无效,这种写法才符合要求。
保留 None 等有效值的工具函数
需要复用时,可以用独立对象区分“缺键”和“值恰好是 None”:
def get_or_build(cache, key, factory):
missing = object()
value = cache.get(key, missing)
if value is missing:
value = factory()
cache[key] = value
return value
cache = {"answer": 0, "optional": None}
assert get_or_build(cache, "answer", lambda: 42) == 0
assert get_or_build(cache, "optional", lambda: 42) is None
assert get_or_build(cache, "new", lambda: 42) == 42
assert cache["new"] == 42
调用时传入 lambda: ... 或函数本身,而非函数调用的返回值。factory 是一个无参数的可调用对象;只有进入缺键分支才执行它。若它抛出异常,赋值语句尚未执行,因此失败结果不会被写进缓存,异常继续交给调用方处理。
这里的“读取、计算、写回”是多个步骤。如果多个线程可能同时访问,同一键仍可能重复计算;这段函数没有承诺并发下只执行一次。需要这种保证时,应另外设计锁和缓存失效策略。
defaultdict 也要看访问方式
defaultdict(factory) 能在 mapping[key] 缺键时调用工厂并插入结果,但 mapping.get(key) 不会触发这个工厂,缺键时仍按 get 的规则返回默认值。不能只换容器类型,却保持原先的访问方式不变。
选择写法时,先明确缺键后要不要计算、要不要写回,以及 0 或 None 是否有效。把这几件事写清楚,通常比压成一行更容易避免隐藏开销。
- 点赞
- 收藏
- 关注作者
评论(0)