VIP20
本课程属于：043-实时风控网关批流一体链路 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

基于Kafka的实时风控数据链路详解

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
实时风控概述
实时风控的定义 · 业务价值 · 与传统风控的区别
实时风控概述实时风控的定义
02
Kafka核心概念
Topic · Partition · Producer
Kafka核心概念
03
Kafka集群部署与配置
集群规划 · ZooKeeper/KRaft模式选… · 关键参数（副本数
Kafka集群部署
04
Kafka生产者原理
消息发送流程 · 分区策略（轮询 · 哈希
Kafka生产者原理
05
Kafka消费者原理
消费组与再均衡 · 位移提交（自动/手动） · 消费模式（拉取/推送）
Kafka消费者原理
06
Kafka消息可靠性保障
生产者端（acks · retries） · Broker端（副本同步
Kafka消息可靠性保障
07
Kafka消息格式与序列化
原生String/ByteArray · Avro · Protobuf
Kafka消息格式
08
Kafka Connect与数据集成
Source Connector（采… · Sink Connector（写入H… · 单机与分布式模式
KafkaConnect
09
Kafka Streams基础
流处理概念 · KStream/KTable/Glo… · 状态存储
KafkaStreams
10
Kafka Streams高级特性
聚合操作（count/reduce/… · Join操作（Stream-Stre… · Exactly-Once语义
KafkaStreams
11
实时风控数据链路总体架构
数据采集层 · 消息中间件层 · 流计算层
实时风控数据链路…数据采集层
12
风控事件数据模型设计
事件ID · 用户ID · 设备指纹
风控事件数据模型…ID
13
风控事件采集与接入
埋点SDK设计 · 服务端日志采集（Filebeat/F… · API网关事件上报
风控事件采集接入
14
风控事件预处理与清洗
字段校验 · 格式标准化 · 缺失值填充
风控事件预处理清洗
15
风控特征计算与特征工程
实时特征（滑动窗口计数/均值/方差） · 离线特征（历史画像/黑名单） · 特征存储（Redis/Feature…
风控特征计算特征工程
16
风控规则引擎设计与实现
规则定义（IF-THEN） · 规则编排（决策树/决策表） · 规则热加载
风控规则引擎设计实现
17
风控模型推理与模型服务
模型部署（ONNX/TensorFl… · 实时推理接口 · 模型版本管理
风控模型推理模型服务
18
风控决策输出与处置
决策结果（通过/拒绝/人工审核） · 处置动作（拦截/限流/加验证码/冻结… · 异步通知
风控决策输出处置
19
风控数据回传与闭环
决策结果回写Kafka · 离线数仓同步 · 模型训练数据回流
风控数据回传闭环
20
Kafka监控与运维
JMX指标（吞吐量/延迟/分区Lea… · Kafka Manager/CMAK · Prometheus+Grafana…
Kafka监控
21
Kafka性能调优
生产者批量发送与压缩 · 消费者拉取大小与并发数 · Broker磁盘与网络优化
Kafka性能调优
22
Kafka安全机制
SSL/TLS加密 · SASL认证（PLAIN/SCRAM… · ACL授权
Kafka安全机制
23
Kafka数据治理与合规
消息过期策略 · 数据备份与恢复 · 跨集群数据同步（MirrorMake…
Kafka数据治理
24
实时风控中的延迟优化
端到端延迟分析 · Kafka参数调优 · 流计算引擎（Flink/Spark…
实时风控延迟优化
25
实时风控中的一致性保障
Exactly-Once语义在风控中… · 幂等规则执行 · 分布式事务（Kafka事务+两阶段提…
实时风控一致性保障
26
实时风控中的流量控制与降级
Kafka限流（Quota） · 消费端背压 · 规则引擎熔断
实时风控流量控制
27
实时风控数据链路测试
单元测试（规则/特征） · 集成测试（Kafka+流计算） · 压力测试（高吞吐场景）
实时风控数据链路…单元测试
28
实时风控数据链路案例实战（一）
交易反欺诈场景——从事件采集到决策输…
实时风控数据链路…交易反欺诈场景
29
实时风控数据链路案例实战（二）
信贷审批场景——结合离线画像与实时行…
实时风控数据链路…信贷审批场景
30
实时风控数据链路总结与展望
当前架构的优缺点 · 未来趋势（AI驱动风控 · 联邦学习
实时风控数据链路…当前架构的优缺点