VIP20
本课程属于：017-风控规则引擎特征样本分层 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

风控特征分层与Spark批处理实战

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
风控特征体系概述
风控特征的定义 · 特征在信贷/反欺诈中的作用 · 特征生命周期管理
风控特征体系概述风控特征的定义
02
特征分层方法论
原始数据层 · 衍生特征层 · 聚合特征层
特征分层方法论原始数据层
03
Spark批处理基础
Spark RDD/DataFram… · SparkSession初始化 · 批处理作业提交流程
Spark批处理基础
04
原始数据接入
从Hive/MySQL/Kafka批… · 交易流水）
原始数据接入Hive/MySQL/K…
05
数据清洗与标准化
缺失值处理 · 异常值过滤 · 时间戳统一格式化
数据清洗标准化
06
基础统计特征
计数 · 求和 · 均值
基础统计特征计数
07
时间窗口特征
滑动窗口（7天/30天） · 固定窗口（近1天/近7天）的统计特征…
时间窗口特征滑动窗口
08
比率与占比特征
成功率 · 失败率 · 转化率
比率占比特征
09
序列与排序特征
事件序列长度 · 事件间隔 · 排名（Rank）
序列排序特征
10
文本与类别特征
One-Hot编码 · Label Encoding · TF-IDF在风控文本特征中的应用
文本类别特征
11
用户画像特征
基于用户基础信息（年龄 · 性别 · 地域）的静态画像特征构建
用户画像特征基于用户基础信息
12
设备指纹特征
设备ID · IP归属地 · 浏览器指纹
设备指纹特征ID
13
关系网络特征
基于图计算的关联度 · 一度/二度关系 · 团伙检测特征（Spark Graph…
关系网络特征基于图计算的关联…
14
时序特征
差分 · 移动平均 · 指数平滑
时序特征差分
15
特征存储与分区
Parquet/ORC格式选择 · 按日期/用户ID分区策略 · 小文件合并优化
特征存储分区
16
特征血缘与元数据
特征命名规范 · 血缘追踪（Atlas/自研） · 特征字典管理
特征血缘元数据
17
Spark性能调优
Shuffle优化 · 广播变量 · 缓存策略
Spark性能调优
18
特征质量监控
空值率 · 分布漂移 · PSI计算
特征质量监控空值率
19
批处理调度
Airflow/Crontab调度S… · 依赖管理 · 失败重试与告警
批处理调度Airflow/Cron…
20
特征回溯与回填
历史特征批量回填策略 · 增量更新与全量更新对比
特征回溯回填
21
特征工程Pipeline
使用Spark ML Pipelin… · 实现可复用的特征流程
Pipeline特征工程
22
特征重要性评估
基于随机森林/GBDT的特征重要性排… · IV值计算与特征筛选
特征重要性评估GBDT
23
特征上线与AB测试
特征离线验证 · 在线一致性比对 · 灰度发布流程
AB特征上线
24
实时特征与批处理融合
Lambda架构中批特征与实时特征的…
实时特征批处理融合
25
多租户特征隔离
不同业务线（信贷 · 支付 · 电商）特征命名空间与权限管理
多租户特征隔离不同业务线
26
特征存储选型
HBase · Redis · ClickHouse在特征在线服务中…
特征存储选型HBase
27
大规模特征工程
千亿级数据量下的特征计算优化 · 动态分区裁剪 · 谓词下推
大规模特征工程千亿级数据量下的…
28
特征监控与运维
特征延迟监控 · 数据质量仪表盘 · 异常检测与自动修复
特征监控运维
29
实战案例一
信贷申请反欺诈特征体系构建（含代码与…
实战案例一信贷申请反欺诈特…
30
实战案例二
交易风控实时+批处理混合特征工程（含…
实战案例二交易风控实时+批…