
当风控要秒级拦截、推荐要实时刷新、经营大屏要分钟级更新,传统 T+1 离线数仓已经力不从心。下一代数据底座,围绕"实时"与"统一"两条主线展开,形成了实时数仓与湖仓一体两大流派。
以流式计算引擎为核心,数据边到边算边用,延迟可压到秒级。代价是链路复杂、状态管理难、历史回溯成本高。适合对时效极度敏感、口径相对稳定的场景。
用开放表格式(如 Iceberg/Hudi/Delta)在数据湖上叠加仓库的事务、schema 与治理能力,一份数据同时支撑 BI、机器学习与流处理,消除"湖仓两张皮"。流批一体让同一套代码既跑实时又跑离线。
选型的本质不是追新,而是在时效、成本、复杂度与团队能力之间找到平衡点。最好的架构,是刚好满足业务、且团队驾驭得住的那一个。
