VIP20
本课程属于：090-反欺诈图谱Kafka回放链路 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Spark回放反欺诈图谱团伙识别案例

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
反欺诈概述
黑产团伙攻击模式 · 设备指纹与IP代理 · 团伙欺诈与个体欺诈的区别
反欺诈概述黑产团伙攻击模式
02
图数据库与图计算基础
图论基本概念（节点 · 边 · 度
图数据库图计算基础
03
Spark GraphFrames入门
GraphFrames安装与配置 · 创建顶点DataFrame与边Dat… · 图的基本属性查询（顶点数
SparkGraphFrames
04
回放攻击原理
回放攻击定义（重放请求 · 撞库 · 批量注册）
回放攻击原理回放攻击定义
05
图谱构建——设备指纹图谱
设备指纹节点定义（IMEI · IDFA · Cookie）
图谱构建设备指纹图谱
06
图谱构建——IP地址图谱
IP节点属性（地理位置 · ASN · 代理标签）
IP图谱构建
07
图谱构建——账号关联图谱
账号节点（手机号 · 邮箱 · 社交账号）
图谱构建账号关联图谱
08
图谱构建——时间序列图谱
时间窗口边（5分钟内同IP登录） · 时间衰减权重设计 · 滑动窗口图快照
图谱构建时间序列图谱
09
Spark回放检测算法——基于子图匹配
定义回放模式（星型 · 链式 · 环状）
Spark回放检测算法
10
Spark回放检测算法——基于连通分量
Connected Componen… · 识别同一设备/IP下的聚集账号 · 大规模图的分区优化
Spark回放检测算法
11
Spark回放检测算法——基于标签传播
Label Propagation… · 半监督团伙识别 · 迭代收敛条件
Spark回放检测算法
12
Spark回放检测算法——基于三角计数
Triangle Count用于检测… · 团伙内部高密度连接识别 · 与回放攻击的关联
Spark回放检测算法
13
Spark回放检测算法——基于PageRank
PageRank在反欺诈中的应用（异… · 个性化PageRank用于种子扩展
SparkPageRank
14
特征工程——图特征提取
节点度数 · 聚类系数 · PageRank值
特征工程图特征提取
15
特征工程——时序特征提取
回放频率 · 时间间隔熵 · 滑动窗口内边数变化率
特征工程时序特征提取
16
特征工程——属性特征提取
设备指纹冲突数 · IP共现次数 · 账号注册时间分布
特征工程属性特征提取
17
模型训练——样本构建
正样本（已知团伙） · 负样本（正常用户） · 样本不平衡处理（SMOTE
模型训练样本构建
18
模型训练——图神经网络入门
GCN · GAT原理简介 · PyTorch Geometric与…
模型训练图神经网络入门
19
模型训练——XGBoost与图特征融合
将图特征与传统特征拼接 · XGBoost超参数调优 · 特征重要性分析
XGBoost模型训练
20
模型评估——离线评估
AUC · KS · Precision-Recall曲线
模型评估离线评估
21
模型评估——在线评估
A/B测试设计 · 实时回放检测延迟 · 线上效果监控与回滚机制
模型评估线评估
22
Spark Streaming实时回放检测
Structured Streami… · 滑动窗口图更新 · 实时触发图算法
SparkStreaming
23
大规模图优化——图分区策略
EdgePartition2D · 顶点切割与边切割 · Spark GraphX分区调优
大规模图优化图分区策略
24
大规模图优化——缓存与序列化
RDD缓存级别选择 · Kryo序列化配置 · 检查点机制
大规模图优化缓存
25
大规模图优化——增量图计算
增量Connected Compon… · 增量LPA · 避免全量重算
大规模图优化增量图计算
26
案例实战——电商注册反回放
数据源（注册日志 · 设备指纹） · 图谱构建
案例实战电商注册反回放
27
案例实战——金融转账反回放
数据源（交易流水 · IP · 设备）
案例实战金融转账反回放
28
案例实战——社交平台刷量反回放
数据源（点赞 · 关注 · 评论）
案例实战社交平台刷量反回…
29
系统架构与部署
整体架构图（Kafka→Spark… · YARN资源分配 · 监控告警
系统架构部署
30
总结与展望
当前方案局限性（冷启动 · 概念漂移） · 未来方向（时序图神经网络
当前方案局限性冷启动