漫画阅读器的图片解码管线:长图、动图与内存的取舍
做漫画阅读器这些年,我越来越觉得:图片加载只是上半场,解码才是决定阅读器顺不顺的下半场。一张图从磁盘或网络读到内存只是字节,变成屏幕上的像素还要经过解码、缩放、上传纹理三步。任何一步卡住,用户看到的就是白屏、闪一下,或者干脆掉帧。我在 Venera-Next 里把解码单独拎成一条管线,前后改了三版,才把这条线走顺。
解码不要发生在主线程
最开始我犯过一个低级错误:直接在 UI 构建时同步解码。本地小图没问题,一旦遇到两三兆的扫描图,翻页瞬间主线程被解码占满,帧率直接掉到个位数。教训很直接:解码是纯 CPU 活,绝不能跟手势、动画抢同一个线程。
现在的做法是分层。第一层是预判:拿到图片字节后先读文件头,只解析宽高和格式,不解码全图,根据宽高决定走哪条路。第二层是异步解码,放到独立的 isolate 里做,解完把像素数据或纹理句柄交回主线程。第三层是降级:低端设备上如果检测到连续解码耗时超过 16 毫秒,就自动把并发解码数从 4 降到 2,宁可让下一页晚 100 毫秒出现,也不能让正在看的这一页卡住。
这里有个取舍值得说:异步解码会让首屏多一次跨线程往返,理论上比同步慢几毫秒。但实际体验上,同步解码卡住的那一帧,用户感知是“翻不过去”;异步解码晚到的那几毫秒,用户感知只是“图片淡入”。前者是故障,后者是过渡,我选后者。
长图要分段,不要整张解
漫画里最难啃的是长条图。一张几千像素高的长图整张解码,内存占用是宽乘高乘 4 字节,2000 乘 10000 的图就是 80MB,只解一张就能把低端机的解码缓存顶爆。更糟的是,用户往往只看其中一段,整张解码纯属浪费。
我的做法是分段解码:先读出长图的总高度,按屏幕高度切成若干段,只解码当前可见段上下各一段。滚动时再按需解码新进入的段,离开屏幕两段以上的段把解码结果释放掉,只保留原始字节。渲染层用裁剪窗口,只把对应段贴到画布上,不让不可见部分参与绘制。
这个方案的代价是实现复杂度:分段边界处要处理好接缝,缩放时要按段重新计算采样率,缩放动画期间还要临时放宽保留范围,避免段与段之间闪出白线。我最后定的规则是:分段只在高度超过屏幕三倍时启用,普通页漫直接整张解码,复杂度只花在真正需要的地方。
动图只缓存前后几帧
GIF 和动图 WebP 是另一个内存黑洞。一张动图几十帧,全部解码缓存等于把几十张图同时塞进内存。早期版本我图省事全帧缓存,连续看几张动图后内存直线上升,系统直接把应用杀掉。
改成滑动窗口后问题就解决了:只保留当前帧前后各两帧,播放指针移动时按需解码新帧、释放远离的帧。暂停时更进一步,只保留当前这一帧,其余全部释放。用户点暂停往往是要细看某一帧,没必要为还没播到的帧占内存。
还有一个细节:动图的第一帧要优先解码并同步显示,哪怕后面的帧还没准备好。用户翻到一张动图,先看到静止的第一帧,再等它动起来,比先看到占位符再等整张动图就绪要舒服得多。
解码后的内存也要算账
很多人只算缓存的图片文件大小,不算解码后的位图。一张 1080p 的图解码后是 8MB 左右,十张就是 80MB。Flutter 自带的 ImageCache 默认按张数和字节数双限额,但它统计的是解码前的字节还是解码后的位图,不同版本行为并不一致,我吃过一次亏:缓存数看着没超,实际内存早爆了。
我的做法是自己再加一层账本:维护一个已解码位图的像素总数上限,按宽乘高累加,超过上限就按最近最少使用释放,不管 ImageCache 那边怎么算。长列表滑动时,这层账本和图片缓存联动:滑出屏幕超过两屏的图片,先释放解码结果,保留原始字节,滑回来再解码。实测下来,这个策略让常驻内存稳定在 150MB 以内,低端机也能连续翻几十页不杀后台。
三处真实踩过的坑
第一处是网络图和本地图走了同一条解码路径。网络图是流式到达的,边下边解听起来很美,实际上中途断流会留下一张半解码的残图。我后来把两条路分开:网络图必须等字节完整并校验通过后再解码,本地图解码失败可以立即重试读盘,不要共用一套错误处理。
第二处是 WebDAV 源的图片。远程文件解码前要先整段拉下来,弱网下用户会觉得“点开半天没反应”。我加了一个中间态:先显示低分辨率的缩略图占位,完整字节到了再换高清解码结果,体验从“卡住”变成“由模糊变清晰”。
第三处是并发数。桌面端 CPU 核多,并发 6 也没事;但同一套代码跑到中低端手机上,并发 6 会让解码互相抢时间片,反而比并发 2 更慢。现在并发数按设备性能分档,首次启动时跑一次 200 毫秒的基准测试定档,之后不再改。
结论
解码管线没有银弹,只有几组明确的取舍:主线程只做展示、不做解码;长图分段、动图只留窗口、解码后内存单独算账;网络图和本地图分开处理。每一组取舍的共同点是:把资源花在用户正在看的那一页上,而不是花在“可能要看”的地方。
如果你也在做图片密集型的 Flutter 应用,这些取舍可以直接拿去对照自己的实现。我的阅读器 Venera-Next 是免费、无广告、GPL-3.0 开源的 Flutter 跨平台漫画阅读器,支持本地漫画、WebDAV 漫画源与第三方网络漫画源,上面提到的解码管线都在这个项目里持续打磨,欢迎来看看代码、提提意见。
- 点赞
- 收藏
- 关注作者
评论(0)