6.1.2.1 热温冷数据划分


文档摘要

6.1.2.1 热温冷数据划分 6.1.2.1 热温冷数据划分:不是策略图谱,而是时间戳的审判日——一个 Kafka + Flink + Iceberg 实时数仓中“冷数据误判导致查询雪崩”的故障复盘与精准修复实践 凌晨两点十七分,监控告警第三次亮起。 值班工程师点开 Grafana 面板,手指悬在键盘上方三秒没动。这不是第一次了。过去两周,每天凌晨 1:30–3:00,系统都会准时“抽搐”——查询变慢、Flink 任务反压加剧、Iceberg 元数据刷新延迟飙升。运维同事说:“可能是小流量高峰”,DBA 认为“分区没建好”,数据平台组甩出一张《热温冷数据分级规范 V2.3》,末尾加粗写着:“冷数据定义:lastaccesstime < 90d 且 writetime < 180d”。


发布者: 作者: 转发
评论区 (0)
U