留痕
8 MIN READ · 实操
日志留存 6 个月怎么落地:容量、采集、防篡改
《网络安全法》要求网络日志留存不少于六个月。听起来简单,实际要解决容量、采集、检索、防篡改四个问题。
核心结论
日志留存的关键不是「存下来」,而是「六个月后还能查、还能信」。这要求集中采集、时间同步、访问控制与完整性保护。
1. 哪些日志必须留
| 来源 | 内容 | 建议保留 |
|---|---|---|
| 系统认证 | SSH 登录、sudo、账号变更 | ≥180 天 |
| Web 访问 | 访问日志、错误日志 | ≥180 天 |
| 应用 | 登录、关键业务操作 | ≥180 天 |
| 数据库 | 慢查询、审计、binlog | 审计 ≥180 天 |
| 安全设备 | WAF、防火墙、IDS | ≥180 天 |
| 云平台 | 操作审计、VPC 流日志 | 按厂商上限 |
2. 容量估算
每日日志量 ≈ 请求数 × 平均每条字节 × (1 + 索引膨胀系数)
示例:日均 500 万请求 × 400B × 1.3 ≈ 2.6GB/天
180 天 ≈ 470GB(压缩后约 80—120GB)
先按一周实测数据外推,不要拍脑袋买存储。访问日志可以只保留必要字段(去掉 UA 中的冗余),能省不少空间。
3. 集中采集
# rsyslog 转发认证日志
*.* @@log.internal:514
# filebeat 采集 Nginx
filebeat.inputs:
- type: filestream
paths:
- /var/log/nginx/*.log
output.elasticsearch:
hosts: ["https://log.internal:9200"]
采集端要能容忍网络中断(本地缓存 + 重试),否则日志平台一重启就丢一段。
4. 时间同步
timedatectl set-timezone Asia/Shanghai
timedatectl set-ntp true
chronyc tracking
所有机器必须统一时区与 NTP 源。日志时间错乱会让时间线无法拼接,是最常见也最致命的低级错误。
5. 防篡改
- 日志平台使用只写账号,采集端无删除权限;
- 开启对象存储的版本控制与合规保留;
- 关键日志做每日哈希并异地保存;
- 限制生产机上的
auditctl -D与日志删除权限; - 本地只留 7—14 天,长期存储放独立平台。
6. 检索与使用
留存不是目的,能查才有意义。至少支持:按 IP、按用户、按 URL、按时间范围、按状态码检索。建议为常见场景做保存的查询:
- 某 IP 的全部请求;
- 某时间段的管理后台访问;
- 上传接口的 POST 记录;
- 登录失败 TOP IP。
7. 成本优化
- 热数据(7—30 天)放高性能存储,冷数据转对象存储;
- 压缩与列式存储;
- 采样:静态资源日志可只留汇总;
- 定期清理无用的 debug 日志。
检查方式:随机指定 90 天前的某一天,要求 10 分钟内查出某 IP 的访问记录。查不到,就说明留存体系不达标。
本文由站点编辑整理,配置与命令已在测试环境验证;不同发行版与版本可能存在差异,执行前请先在非生产环境演练。
PREV
数据安全法与个人信息保护法的运维动作
NEXT
网站备案与公安备案:流程、材料与常见退回