VIP20

本课程属于：005-金融特征平台样本偏差校验 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

离线特征与实时特征一致性校验方法

共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

离线特征与实时特征的定义 · 为什么需要一致性校验 · 课程目标与学习路径

课程导论离线特征

特征工程基础回顾

特征存储 · 特征计算模式（批处理 vs 流处理） · 特征生命周期管理

特征工程基础回顾特征存储

离线特征系统架构

典型离线特征ETL流程 · Hive/Spark特征表设计 · 离线特征仓库分层

离线特征系统架构ETL

实时特征系统架构

典型实时特征计算流程 · Flink/Kafka Stream… · 在线特征存储（Redis/HBase…

实时特征系统架构典型实时特征计算…

一致性问题的根源

时间窗口差异 · 数据延迟 · 计算逻辑异构

一致性问题的根源时间窗口差异

一致性校验方法论总览

校验维度（值 · 分布 · 时效性）

一致性校验方法论…校验维度

基于快照的离线-实时特征值对比

全量快照生成 · 实时特征对齐 · 逐字段精确匹配与误差容忍

基于快照的离线实时特征值对比

基于分布的一致性校验

KS检验 · PSI（群体稳定性指标） · 分位数对比

基于分布的一致性…KS

时间语义对齐

事件时间 vs 处理时间 · 水位线（Watermark）机制 · 延迟数据处理策略

时间语义对齐vs

特征回溯与回填校验

离线回溯特征生成 · 实时特征日志回放 · 对比回填结果

特征回溯回填校验

特征血缘与元数据管理

特征定义中心 · 血缘追踪 · 版本管理对一致性校验的支撑

特征血缘元数据管理

校验数据采样策略

分层采样 · 时间分层采样 · 异常值富集采样

校验数据采样策略分层采样

自动化校验管道设计

调度框架（Airflow/Dolph… · 校验任务DAG · 失败告警与重试

自动化校验管道设…Airflow/Dolp…

校验结果存储与可视化

校验结果表设计 · 指标看板（Grafana） · 异常趋势分析

校验结果存储可视化

实时特征监控与告警

特征延迟监控 · 特征值突变检测 · 基于校验结果的实时告警

实时特征监控告警

特征穿越（Data Leakage）检测

未来信息泄露场景 · 离线与实时特征时间戳校验 · 穿越样本识别

特征缺失与默认值一致性

默认值策略对齐 · 空值率对比 · 缺失模式分析

特征缺失默认值一致性

特征变换逻辑一致性

UDF/UDTF一致性 · 特征组合逻辑对比 · SQL与Flink SQL等价性验证

特征变换逻辑一致…UDF/UDTF

特征分桶与离散化一致性

分桶边界对齐 · 分桶映射逻辑校验 · 分桶后分布对比

特征分桶离散化一致性

特征聚合窗口一致性

滑动窗口 vs 滚动窗口 · 窗口对齐 · 聚合函数（sum/avg/count…

特征聚合窗口一致…vs

特征ID映射一致性

实体ID解析 · Join键一致性 · 多源ID映射校验

跨团队协作与规范

特征定义规范 · 发布流程 · 变更通知

跨团队协作规范

离线-实时特征一致性测试框架

单元测试 · 集成测试 · 回归测试

离线实时特征一致性测…

基于日志的实时特征重建与校验

Kafka消息回溯 · 实时特征状态重建 · 与离线特征对比

基于日志的实时特…校验

大规模特征校验性能优化

并行校验 · 数据分片 · 增量校验

大规模特征校验性…并行校验

异常检测与根因分析

校验失败自动分类 · 特征漂移根因定位 · 影响范围评估

异常检测根因分析

推荐系统特征一致性校验（用户画像 · 物品特征 · 交叉特征）

案例实战1推荐系统特征一致…

风控系统特征一致性校验（实时评分 · 历史行为聚合 · 设备指纹）

案例实战2风控系统特征一致…

广告竞价特征一致性校验（实时出价特征 · 离线CTR特征 · 上下文特征）

案例实战3广告竞价特征一致…

课程总结与最佳实践

一致性校验成熟度模型 · 常见陷阱 · 未来趋势（实时特征湖

课程总结最佳实践