VIP20
本课程属于:035-Flink状态管理 数据工程与实时数据平台 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

数据契约与状态Schema治理

📚 共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
数据契约基础
什么是数据契约 · 起源与演进 · 核心价值
契约演进
02
Schema定义与类型
基础概念 · 强Schema与弱Schema · 版本化策略
类型版本
03
Avro Schema实战
基础语法 · 复杂类型 · 兼容性模式
Avro兼容
04
Protobuf Schema实战
语法详解 · Message定义 · 字段规则与包管理
ProtobufMessage
05
JSON Schema实战
核心关键字 · 校验规则 · $ref引用与组合
JSON校验
06
Schema Registry架构
核心功能 · 存储模型 · 版本管理机制
注册中心架构
07
Confluent Schema Registry
部署配置 · REST API · 客户端集成
Confluent集成
08
Apicurio Registry
开源方案对比 · 部署模式 · Kafka集成
Apicurio开源
09
数据契约生命周期
创建 · 审核 · 发布 · 废弃 · 归档全流程
生命周期治理
10
契约兼容性治理
兼容性检查 · 破坏性变更识别 · 自动化测试
兼容自动化
11
Schema演化策略
字段增删改 · 默认值 · 枚举演化
演化策略
12
数据质量规则
非空 · 唯一 · 范围 · 格式 · 自定义规则
质量校验
13
契约与数据血缘
数据血缘基础 · Schema关联 · 影响分析
血缘影响
14
元数据管理
Schema元数据模型 · 标签系统 · 自定义属性
元数据标签
15
数据目录集成
Atlas · DataHub · Amundsen 集成实践
目录集成
16
Kafka消息契约
Topic Schema绑定 · 格式校验 · 序列化
Kafka消息
17
REST API契约
OpenAPI+Schema · 请求响应校验 · 文档生成
RESTOpenAPI
18
数据库Schema治理
DDL版本管理 · 变更自动化 · 回滚策略
数据库DDL
19
数据湖Schema治理
Delta Lake · Iceberg · Hudi Schema
数据湖Delta
20
实时流处理契约
Flink Schema · Kafka Streams · 状态兼容
流处理Flink
21
数据管道契约
ETL/ELT映射 · 字段转换 · 异常处理
管道ETL
22
多语言Schema管理
跨语言兼容 · 代码生成 · 类型映射
多语言生成
23
契约测试框架
单元测试 · 集成测试 · 自动化工具
测试框架
24
CI/CD集成
Schema校验流水线 · 自动化发布 · 回滚
CI/CD流水线
25
监控与告警
变更监控 · 兼容告警 · 使用率统计
监控告警
26
安全与权限
访问控制 · 加密存储 · 审计日志
安全权限
27
治理流程自动化
审批工作流 · 变更通知 · 合规检查
自动化工作流
28
大规模集群治理
多集群同步 · 全局ID · 跨数据中心复制
集群同步
29
治理成熟度模型
评估维度 · 等级划分 · 改进路线图
成熟度评估
30
案例实战
电商平台全流程 · 金融行业最佳实践
案例实战