统一存储缓存方案极简版1. 现状企业文件全部存商业OSS作为唯一正本。上传分两种前端后端生成 FileKey 预签名URL前端直传商业OSS。内部服务后端提供接口直接上传文件返回 FileKey。所有业务审核、OCR、AI、风控、财务、复盘会反复多次下载同一个文件。2. 现有问题虽然现在云OSS存储成本已经很便宜和内部存储基本持平但依然存在两个核心问题公网流出流量收费贵每次内部系统下载都走商业OSS公网出流量反复下载重复扣费。公网速度慢、不稳定AI、OCR、批量审核反复拉文件耗时高、抖动大、容易打满外网带宽。3. 解决方案新增一层内部OSS缓存整体原则商业OSS永远是唯一正本内部OSS只做加速缓存副本。核心规则上传只传商业OSS不上传内部OSS不提前囤文件。内部读取文件时优先读内部缓存。缓存有效期 30天每次访问自动刷新30天热点文件永久续期。30天无人访问自动清理不浪费内部存储。业务调用方预签名URL请求读取文件正本存储缓存副本回源同步清理过期文件前端内部业务审核/OCR/AI/风控/财务统一存储网关元数据filekey/缓存状态/TTL异步任务回源、每日清理商业OSS唯一源内部OSS缓存TTL30天访问续期4. 核心流程最简逻辑4.1 上传保持原有逻辑不变生成 FileKey - 上传商业OSS - 业务记录 FileKey。✅ 不上内部缓存无多余开销。4.2 下载核心是否业务请求filekey统一存储网关缓存存在且未过期读内部OSS返回刷新TTL当前30天直接读商业OSS返回业务提交异步回源任务后台下载文件写入内部OSS标记缓存就绪设置30天TTL业务请求文件。如果内部缓存存在且未过期直接读内网、刷新30天有效期、返回文件。如果无缓存/已过期立刻从商业OSS下载返回业务同时异步后台同步一份到内部OSS。 第一次走外网后面30天全部走内网。4.3 清理每日定时任务清理超过30天未访问的内部缓存文件。5. 系统价值真实、当前版本现在存储成本已经持平这套方案不再省存储钱价值只剩两点但依然很值大幅节省商业OSS公网流量费用多轮审核、AI、风控、财务反复下载只有第一次计费后续全部免费内网读取。高频文件收益极大。内部处理速度更快、更稳内网读取延迟低、无外网抖动批量OCR/AI任务效率提升且不会打崩外网带宽。6. 代价与取舍多一份内部缓存副本小幅增加内部存储成本。架构多一层缓存逻辑、异步回源、定时清理复杂度轻微上升。7. 关键设计保障数据不乱正本永远在商业OSS缓存只是副本。业务无感知FileKey、上传逻辑、业务字段完全不变。可控不膨胀TTL自动续期自动清理不会无限堆积缓存。可降级内部OSS故障自动切回商业OSS不影响业务。