首页
›
企业数字化与管理工程
›
021-工程数据平台与AI知识智能
›
《工程数据质量自动化校验工程》
VIP14
本课程属于:021-工程数据平台与AI知识智能
企业数字化与管理工程 · 共 14 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
质量规则自动化校验与故障排查在工程分析平台中的工程案例
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
课程导论
质量规则自动化校验的背景 · 工程分析平台概述 · 课程目标与学习路径
课程导论
质量规则自动化校…
02
质量规则基础概念
数据质量维度(完整性 · 准确性 · 一致性
质量规则基础概念
数据质量维度
03
工程分析平台架构
平台分层架构(数据源层 · 规则引擎层 · 校验执行层
工程分析平台架构
平台分层架构
04
规则引擎设计原理
规则解析 · 规则编译 · 规则执行上下文
规则引擎设计原理
规则解析
05
规则定义语言(RDL)
语法设计 · 表达式支持 · 函数库
RDL
规则定义语言
06
规则元数据管理
规则注册 · 版本控制 · 生效范围
规则元数据管理
规则注册
07
自动化校验流程设计
触发机制(定时 · 事件驱动 · API调用)
自动化校验流程设…
触发机制
08
数据源接入与适配
关系型数据库 · 消息队列 · 文件系统
数据源接入
适配
09
校验执行引擎
并行执行策略 · 资源隔离 · 超时熔断
校验执行引擎
并行执行策略
10
结果集处理与存储
校验结果数据结构 · 异常数据标记 · 结果持久化(HBase/ES)
结果集处理
存储
11
告警与通知机制
多通道告警(邮件 · 钉钉 · 短信)
告警
通知机制
12
故障排查概述
常见校验失败类型(规则配置错误 · 数据源异常 · 引擎异常
故障排查概述
常见校验失败类型
13
规则配置错误排查
语法错误 · 逻辑错误 · 参数越界
规则配置错误排查
语法错误
14
数据源连接故障排查
连接超时 · 认证失败 · 网络分区
数据源连接故障排…
连接超时
15
数据格式与编码问题
字符集不一致 · 日期格式歧义 · 数值精度丢失
数据格式
编码问题
16
校验执行性能问题
规则执行慢 · 内存溢出 · CPU飙升
校验执行性能问题
规则执行慢
17
日志与监控体系
结构化日志设计 · 关键指标监控(规则执行耗时 · 失败率
日志
监控体系
18
故障根因分析(RCA)方法论
故障树分析 · 时间线回溯 · 依赖图谱分析
RCA
故障根因分析
19
自动化故障诊断工具
规则预检沙箱 · 数据样本预览 · 执行计划可视化
自动化故障诊断工…
规则预检沙箱
20
工程案例一
电商订单数据质量校验——订单金额异常…
工程案例一
电商订单数据质量…
21
工程案例二
金融交易流水校验——重复交易识别与一…
工程案例二
金融交易流水校验
22
工程案例三
物联网传感器数据校验——异常值过滤与…
工程案例三
物联网传感器数据…
23
工程案例四
日志分析平台校验——日志格式合规性与…
工程案例四
日志分析平台校验
24
规则热更新与灰度发布
不停机更新规则 · 灰度验证策略 · 回滚机制
规则热更新
灰度发布
25
大规模规则治理
规则分类 · 标签体系 · 规则生命周期管理
大规模规则治理
规则分类
26
质量度量与报表
数据质量评分卡 · 规则覆盖率 · 校验通过率趋势
质量度量
报表
27
与CI/CD流水线集成
在数据管道中嵌入校验步骤 · 阻断发布机制 · 质量门禁
CI/CD
流水线集成
28
安全与权限控制
规则访问控制 · 敏感数据脱敏 · 审计日志
安全
权限控制
29
平台高可用与容灾
多活部署 · 规则引擎无状态化 · 校验结果异地备份
平台高可用
容灾
30
课程总结与展望
最佳实践总结 · AI辅助规则生成 · 未来演进方向(实时校验
课程总结
最佳实践总结
所属VIP或分类
同VIP:工程合同AI审查与条款分析
同VIP:工程成本AI预测与偏差分析
同VIP:工程指标口径与数据质量治理