VIP20

本课程属于：048-数据交换与API治理 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

数据交换 API治理数据共享机制与订阅模式订阅分发 CDC

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

数据共享概述

什么是数据共享、数据共享的价值与挑战、常见数据共享模式对比。

数据订阅模式基础

发布-订阅模式原理、消息队列核心概念、主题与分区设计。

模式消息队列

消息中间件选型

Kafka vs RabbitMQ vs Pulsar、选型考量因素、部署环境准备。

中间件对比

Kafka核心概念

Producer、Consumer、Broker、Topic、Partition、Offset。

Kafka安装与配置

单机部署、集群部署、关键配置参数详解。

生产者实战

创建生产者、发送消息、同步与异步发送、分区策略。

消费者实战

创建消费者、订阅主题、消费位移管理、再均衡机制。

消息序列化与反序列化

JSON、Avro、Protobuf序列化方案对比与实战。

消息可靠性保证

ACK机制、幂等性、事务消息、Exactly-Once语义。

可靠性事务

消息顺序性

全局顺序与局部顺序、分区内顺序保证、常见陷阱。

消息去重与幂等性

幂等生产者、消费者端去重策略、业务幂等设计。

死信队列与重试机制

死信队列概念、重试策略设计、消息回退处理。

数据共享安全

认证机制（SASL/SSL）、授权与ACL、数据加密传输。

数据共享监控

JMX监控、Prometheus+Grafana集成、关键指标解读。

监控Prometheus

数据共享治理

数据血缘追踪、元数据管理、数据质量监控。

实时数据共享实战

CDC（Change Data Capture）原理、Debezium实战。

批量数据共享

批量导出与导入、数据湖集成、ETL流程设计。

跨组织数据共享

数据沙箱、隐私计算、联邦查询方案。

跨组织隐私

数据共享API设计

RESTful vs gRPC、API网关、限流与鉴权。

数据共享契约

Schema Registry、契约测试、版本兼容性管理。

数据共享延迟优化

批量处理、压缩、预取与缓存策略。

数据共享容错设计

副本机制、故障转移、脑裂问题处理。

容错高可用

数据共享扩展性

分区扩展、消费者组扩展、动态扩缩容。

数据共享成本控制

存储优化、网络带宽管理、冷热数据分离。

数据共享合规

GDPR合规、数据脱敏、审计日志。

多数据中心数据共享

跨地域复制、延迟优化、一致性模型。

数据共享与微服务

事件驱动架构、CQRS模式、Saga模式。

微服务事件驱动

数据共享测试

单元测试、集成测试、混沌工程实践。

数据共享运维

日志管理、告警规则、故障排查手册。

综合实战：构建企业级数据共享平台

需求分析、架构设计、实现与部署。

实战企业级