VIP20
本课程属于：020-实时指标平台 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

实时特征生产与复用技巧系统设计与落地

📚 共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
第1章
实时特征生产概述
实时特征的定义、应用场景（推荐、风控）、与离线特征的区别。
定义场景对比
第2章
实时计算引擎选型
Flink、Spark Streaming、Kafka Streams 对比与选型依据。
FlinkSparkKafka
第3章
特征生产架构设计
Lambda架构与Kappa架构在实时特征中的应用。
LambdaKappa架构
第4章
事件时间与处理时间
水位线（Watermark）机制、乱序数据处理策略。
Watermark乱序时间语义
第5章
状态后端与状态管理
Flink状态后端（RocksDB、Heap）、状态TTL设置。
RocksDBTTL状态
第6章
滑动窗口与滚动窗口
窗口类型选择、窗口内特征聚合（计数、均值、方差）。
滑动窗口滚动窗口聚合
第7章
Session窗口与自定义窗口
用户行为Session切割、自定义窗口触发器。
Session触发器自定义
第8章
多流Join与维表关联
实时流与维表（Redis、MySQL）的关联技巧。
Join维表Redis
第9章
特征存储选型
Redis、HBase、Cassandra 在实时特征存储中的优劣。
RedisHBaseCassandra
第10章
特征复用策略
特征共享层设计、特征血缘管理。
共享层血缘复用
第11章
特征计算与存储分离
计算层与存储层解耦，提升复用性。
解耦存储分离复用
第12章
特征版本管理
特征Schema演进、向后兼容策略。
Schema兼容版本
第13章
特征缓存机制
本地缓存与分布式缓存（Guava、Redis Cache）。
GuavaRedis缓存
第14章
特征预计算与物化视图
预聚合特征、物化视图的更新策略。
预聚合物化视图更新
第15章
特征生产监控
延迟监控、数据质量监控、特征覆盖率监控。
延迟质量覆盖率
第16章
特征回溯与补数
历史数据回溯计算、特征数据修复。
回溯补数修复
第17章
特征上线与灰度发布
A/B测试框架、特征开关设计。
A/B灰度开关
第18章
特征一致性校验
实时特征与离线特征的对齐校验。
一致性对齐校验
第19章
特征生产中的序列化
Avro、Protobuf、Thrift 选型与性能对比。
AvroProtobufThrift
第20章
特征生产中的背压处理
背压原理、反压监控与调优。
背压反压调优
第21章
特征生产中的容错机制
Checkpoint与Savepoint原理与应用。
CheckpointSavepoint容错
第22章
特征生产中的资源隔离
Slot划分、资源组隔离策略。
Slot资源组隔离
第23章
特征生产中的性能调优
并行度设置、算子链优化、数据倾斜处理。
并行度算子链倾斜
第24章
特征生产中的安全与权限
特征数据脱敏、访问控制（RBAC）。
脱敏RBAC安全
第25章
特征生产中的测试策略
单元测试、集成测试、端到端测试。
单元测试集成E2E
第26章
特征生产中的CI/CD
自动化构建、自动化部署、自动化测试流水线。
CI/CD自动化流水线
第27章
特征生产中的文档与知识库
特征字典、特征血缘图、API文档。
字典血缘图API
第28章
特征生产中的成本优化
计算资源成本、存储资源成本优化策略。
成本资源优化
第29章
特征生产中的最佳实践
从0到1搭建实时特征平台的完整案例。
最佳实践案例平台
第30章
实时特征生产未来趋势
流式湖仓、Feature Store、AI驱动的特征工程。
流式湖仓Feature StoreAI