底层依据:贯穿 DDIA、存算分离、Lakehouse 三层层模型、Iceberg/Delta 事务日志、Z-Order/延迟物化等已被工业界验证的理论
一、总体知识体系(数据湖系统全景)
历史—理论—架构—存储—计算—治理—优化—软硬协同—云原生—行业落地—未来" 十二条主线螺旋展开:
主轴 | 覆盖卷区 | 核心问题 |
|---|---|---|
历史与演进 | 卷1-3 | 从 RDBMS → DW → Hadoop → Lake → Lakehouse → AI-Native |
理论与形式化 | 卷4-6 | CAP/BASE、事务模型、表格式数学、查询代数 |
架构与设计范式 | 卷7-10 | 分层、存算分离、事件驱动、Data Mesh |
存储内核 | 卷11-15 | 对象存储、HDFS、Parquet |