VIP20
本课程属于：012-工程分析数据平台 工程项目数字化与成本智能管控 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

指标口径验证与数据流水线协同在工程分析平台中的配置

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
指标口径验证与数据流水线协同的背景 · 目标与核心价值
课程导论指标口径验证
02
工程分析平台概述
平台架构 · 核心模块 · 数据流转路径简介
工程分析平台概述平台架构
03
指标口径定义
什么是指标口径 · 口径的构成要素（维度 · 度量
指标口径定义什么是指标口径
04
口径管理元数据模型
口径元数据表结构 · 版本控制 · 血缘关系建模
口径管理元数据模…口径元数据表结构
05
数据流水线基础
ETL/ELT流程 · 调度引擎（Airflow/Dolph…
数据流水线基础ETL/ELT
06
流水线配置入门
DAG定义 · 任务节点 · 依赖关系
流水线配置入门DAG
07
口径验证需求分析
为什么需要验证 · 常见口径错误类型（逻辑错误 · 数据漂移
口径验证需求分析为什么需要验证
08
验证规则引擎设计
规则模板 · 规则表达式 · 规则优先级与冲突检测
验证规则引擎设计规则模板
09
验证规则配置实践
基于SQL的规则 · 基于Python的规则 · 基于统计模型的规则
验证规则配置实践SQL
10
验证触发机制
手动触发 · 定时触发 · 事件驱动触发（数据到达/更新）
验证触发机制手动触发
11
验证结果存储与通知
结果表设计 · 告警通道（邮件 · 钉钉
验证结果存储通知
12
流水线与验证协同模式一
验证作为流水线后置节点（数据产出后校…
流水线验证协同模式一
13
流水线与验证协同模式二
验证作为流水线前置节点（数据准入校验…
流水线验证协同模式二
14
流水线与验证协同模式三
验证嵌入流水线中间节点（逐层校验）
流水线验证协同模式三
15
协同配置实战
在Airflow中配置验证任务与主E…
协同配置实战Airflow
16
协同配置实战
在DolphinScheduler中…
协同配置实战DolphinSched…
17
口径版本变更管理
口径升级时如何同步更新验证规则与流水…
口径版本变更管理口径升级时如何同…
18
数据质量监控看板
基于验证结果构建实时质量仪表盘（Gr…
数据质量监控看板Gr
19
异常数据回溯机制
验证失败后如何自动触发数据回滚或补偿…
异常数据回溯机制验证失败后如何自…
20
多环境配置管理
开发 · 测试 · 生产环境的流水线与验证规则差异化配置
多环境配置管理开发
21
权限与安全控制
流水线操作权限 · 验证规则修改权限 · 敏感数据脱敏策略
权限安全控制
22
性能优化
大规模数据验证的并行执行策略 · 资源隔离与限流
性能优化大规模数据验证的…
23
日志与审计
流水线执行日志 · 验证规则执行日志 · 口径变更审计追踪
日志审计
24
案例一
金融风控指标口径验证与实时流水线协同…
案例一金融风控指标口径…
25
案例二
电商GMV口径验证与离线批处理流水线…
案例二GMV
26
案例三
IoT设备数据质量验证与流式流水线协…
案例三IoT
27
常见问题与排错
验证规则不生效 · 流水线依赖死锁 · 口径不一致排查
常见问题排错
28
最佳实践总结
配置规范 · 命名规范 · 文档化要求
最佳实践总结配置规范
29
自动化测试与CI/CD集成
将口径验证规则纳入持续集成流水线
CI/CD自动化测试
30
课程总结与展望
未来趋势（AI辅助验证 · Data Mesh下的协同模式）
课程总结AI