OBS接CDN后查询参数缓存失效的排查记录
上周把公司的运营后台放到华为云OBS后,我顺手接了一层CDN。静态文件放在OBS里,CDN负责回源,理论上配置很简单,实际跑起来以后却在后台图片上花了半天。
站点使用Vue 2.6.14和Vue Router 3.5.3,构建产物由CodeArts流水线传到OBS。图片地址类似下面这样:
https://cdn.example.com/reports/chart.png?t=1719828364&token=8f31
每次刷新后台,图表地址上的时间戳都会变化。我原以为CDN会把不同时间戳当成不同对象,结果浏览器拿到的旧图片已经和当前数据对不上。运营同学看到的图 sometimes 是上一次账号的,图例里甚至出现过一个已经离职的测试账号。
最初以为OBS缓存有问题
我先在OBS控制台看了对象属性,Cache-Control写的是30天,对象版本号也在正常更新。直接访问OBS源站时,图片能刷新;只要经过CDN,旧图就回来了。
用curl对比了一次响应:
curl -I 'https://obs.example.com/reports/chart.png?t=1719828364&token=8f31'
HTTP/1.1 200 OK
Server: OBS
Content-Type: image/png
Cache-Control: public, max-age=2592000
Last-Modified: Tue, Jul 01 09:26:04 GMT
ETag: "5c42f3e6d1a8c947"
curl -I 'https://cdn.example.com/reports/chart.png?t=1719828364&token=8f31'
HTTP/1.1 200 OK
Server: CDN
X-Cache: HIT
Age: 173
Last-Modified: Tue, Jul 01 09:26:04 GMT
ETag: "5c42f3e6d1a8c947"
源站对象时间是当天09:26,CDN里的HIT响应却带着09:26的旧对象,关键线索是Age: 173。这说明CDN节点里已经有一份内容,只是它命中了之前某个请求留下的缓存。我当时仍怀疑OBS上传覆盖出了问题,于是用OBS CLI下载了对象,文件大小和sha256都一致。
CLI版本是3.25.3,核对命令如下:
hcloud obs cp obs://static-site/reports/chart.png ./chart.png --version 3.25.3
sha256sum ./chart.png
这一步排除了源文件错误,但我没有立刻改规则,因为还需要确认CDN为什么把带不同查询参数的对象视作同一份。
缓存键配置里漏了查询参数
CDN控制台原有的“URL参数”规则是忽略全部参数。我进入“缓存规则”,找到域名cdn.example.com,把参数处理方式从“忽略所有参数”改成“保留参数”。保存后我没有直接认定成功,而是等待节点配置下发,并用新的时间戳请求两次。
curl -sI 'https://cdn.example.com/reports/chart.png?t=1719829971&token=91ac' | grep -Ei 'HTTP/|X-Cache|Age'
curl -sI 'https://cdn.example.com/reports/chart.png?t=1719829971&token=91ac' | grep -Ei 'HTTP/|X-Cache|Age'
第一次响应是HTTP/2 200和X-Cache: MISS,第二次变成HIT,Age从0变成2。配置确实生效了。不过这种做法有个副作用:URL里每次都带时间戳,后台每次刷新都会产生新缓存对象,旧对象还会等30天过期。
CDN用量很快给出了信号。修改前每天下行流量约38GB,其中这个后台域名占31.6GB;修改后的第一个小时仍有19.4GB。我查了CDN流量明细,发现很多请求带token和t两个参数,有的甚至还有前端调试留下的v参数。
把缓存规则改成按实际路径处理
只保留全部参数并不适合这个站点。真正需要实时更新的只有/api/report/下面的图片,静态JS和CSS不应该因为登录参数变化而反复回源。我建立了两条规则,给报表路径单独设置较短缓存时间,并让CDN回源时忽略查询参数。
缓存规则 1:
URL匹配:/api/report/*
缓存时间:60秒
回源参数:忽略 token、t、v
缓存规则 2:
URL匹配:/assets/*
缓存时间:30天
回源参数:忽略全部参数
控制台没有提供与我现有对象结构完全对应的规则表达能力,我回退到CDN支持的URL参数配置,只对报表目录开启参数缓存。OBS里的对象路径同步调整成按日期保存,CDN回源规则保留path和date两个参数,忽略token与t。
代码构建时把报表文件输出到固定目录,同时让业务请求携带明确的版本字段:
GET /api/report/chart.png?date=2025-07-01&v=202507010926
这版改动后,后台仍能刷新数据,CDN也不会把不同账号的临时token写进缓存键。我用三个不同token连续请求,结果都命中同一个ETag:
for token in aaa bbb ccc; do
curl -sI "https://cdn.example.com/api/report/chart.png?date=2025-07-01&v=202507010926&token=$token" \
| grep -E 'HTTP/|X-Cache|ETag'
done
三次响应中的ETag都是"5c42f3e6d1a8c947",没有再次回源。这里我没有只靠响应头判断,还看了CDN访问日志。日志时间使用UTC,筛选北京时间09:25到10:05后,回源记录从每小时4200条降到130条左右。
旧缓存没有因为改规则自动消失
改完规则后,问题没有完全消失。旧节点里还留着带随机token的对象,控制台刷新URL只清理了一个节点,外部测试仍遇到X-Cache: HIT。我提交了CDN缓存刷新工单,注明域名、目录和工单原因,执行记录显示刷新完成于09:42,耗时约7分钟。
刷新期间我把报表接口临时切到OBS直连,ECS规格是通用计算型s6.large.2xlarge,4核16GB,所在可用区为华北-北京四。直连一晚产生约140GB流量,按OBS公网下行0.50元/GB估算,额外费用约70元,这个临时方案不适合长期使用。
节点配置与缓存清理完成后,第二天CDN下行流量降到6.4GB,比修改前的38GB少31.6GB。按同样的0.50元/GB计算,每月可少支出约470元。这里没有把业务增长算进去,6.4GB只是单账号环境下的实测值,费用仍需要结合访问日志复核。
还留着两个隐患
目前报表图只有60秒缓存,半分钟内连续点击仍可能拿到上一份结果,所以我把前端请求合并成每30秒最多一次。另一个问题是CDN日志没有直接展示完整缓存键,我只能结合URL参数与回源日志判断规则是否命中。后面准备在响应头里加入自定义版本标识,方便排查账号之间是否串缓存。
下一次发版前,我还要把OBS生命周期规则和CDN缓存时间对齐。现在OBS对象保留30天,CDN最长缓存30天,按最坏情况会出现对象删除后缓存继续存活的问题。我打算把OBS过期时间改成14天、CDN改成7天,再补一条自动检查脚本。现在这个改造只覆盖了图片目录,JS和CSS的缓存策略还需要单独压测。
- 点赞
- 收藏
- 关注作者
评论(0)