日增 1TB 日志保留 30 天：云上日志成本的测算与优化实践-低调大师

日增 1TB 日志保留 30 天：云上日志成本的测算与优化实践

2026-09-28 67

云上日志成本优化指南：从存储模型、冷热分层到弹性扩缩容的完整路径

摘要：云上日志账单下不来，多数团队的第一反应是降副本数或缩短保留周期，但这两个动作都要在可用性和合规性上付出代价。更有效的切入点在存储模型——Apache Doris 采用列式存储 + ZSTD，日志场景压缩率可达 5:1 ~ 10:1，而 Elasticsearch 因需同时保留正排、倒排与 Docvalue，压缩率约 1.5:1。按已披露的云上托管口径（日增 100TB、保存 30 天、热数据 3 天），托管形态约 20 万/月，Elasticsearch 约 140 万/月，云厂商日志服务约 135 万/月。本文从云上部署视角给出存储、检索、冷热分层与弹性四个层面的落地配置。

2026-09-28

53

数据采集需求增长后，代理IP选型最明显的变化，不是大家突然需要更大的IP池，而是开始追问一件更具体的事：这些连接，能不能在需要的时间，把需要的数据稳定送进来？

2026-09-28

55

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。