VIP20

本课程属于：034-Kafka性能调优 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Kafka副本机制与可靠性权衡

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

副本机制概述

什么是副本、副本的作用（高可用、容错、性能扩展）、副本的代价（存储成本、一致性开销）。

基础核心概念

数据一致性模型

强一致性、最终一致性、因果一致性、读己之写一致性。

一致性理论

同步复制与异步复制

同步复制的原理与延迟、异步复制的风险与吞吐量、半同步复制。

复制模式性能

副本放置策略

机架感知、区域感知、一致性哈希、副本数选择。

调度分布式

故障检测与恢复

心跳机制、超时与重试、故障转移、数据重建。

高可用容错

分布式共识算法（上）

Paxos 算法原理、Basic Paxos 与 Multi-Paxos。

分布式共识算法（下）

Raft 算法原理、Leader 选举、日志复制、安全性。

副本与一致性的权衡

CAP 理论详解、PACELC 扩展、BASE 理论。

副本与性能的权衡

读写放大、延迟与吞吐量、资源利用率。

副本与存储成本的权衡

数据冗余率、压缩与纠删码、冷热数据分层。

主从复制架构

MySQL 主从复制、Redis 主从复制、Kafka 分区副本。

多主复制架构

多主冲突处理、CRDT（无冲突复制数据类型）、Galera Cluster。

无主复制架构

Dynamo 风格、Quorum 机制、读修复与反熵。

链式复制的原理、与主从复制的对比、应用场景。

副本一致性检测

Checksum 对比、Merkle Tree、差异修复。

分布式文件系统副本

HDFS 副本机制、Ceph 副本与纠删码、GFS 的设计。

文件系统HDFS

分布式数据库副本

Spanner 的 TrueTime 与副本、CockroachDB 的 Raft 实现、TiKV 的 Multi-Raft。

数据库Spanner

消息队列副本

Kafka ISR 机制、Pulsar BookKeeper 副本、RabbitMQ 镜像队列。

消息队列Kafka

缓存系统副本

Redis Sentinel 与 Cluster、Memcached 无副本设计、一致性哈希的副本。

云原生环境下的副本

Kubernetes StatefulSet 与 PVC、Operator 管理副本、云存储的多 AZ 副本。

副本与数据安全

加密副本、访问控制、备份与快照。

副本与灾难恢复

跨地域复制、RPO 与 RTO、演练与自动化。

副本监控与运维

指标采集（复制延迟、健康状态）、告警策略、自动化运维。

副本机制在微服务中的应用

服务实例副本、配置中心副本、API 网关副本。

微服务架构

副本与分布式事务

两阶段提交（2PC）与副本、Saga 模式与副本、TCC 与副本。

副本与负载均衡

读写分离、权重分配、动态路由。

负载均衡路由

副本与数据分片

分片与副本的关系、一致性哈希分片、动态分片。

副本机制的高级话题

Quorum 与 Byzantine 容错、副本的版本控制、副本的垃圾回收。

高级Byzantine

副本机制的设计模式

Leader-Follower、Peer-to-Peer、Master-Master。

设计模式架构

综合案例：高可用分布式键值存储

设计一个高可用分布式键值存储系统（结合副本、一致性、分片、故障恢复）。