VIP20
本课程属于：086-风控数据质量坏账率哨兵 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

SQL数据质量探查：从入门到实战

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
数据质量概述
什么是数据质量 · 数据质量六大维度（完整性 · 准确性
数据质量概述什么是数据质量
02
SQL基础回顾
SELECT查询语法 · WHERE条件过滤 · DISTINCT去重
SQL基础回顾
03
聚合函数与分组统计
COUNT · SUM · AVG
聚合函数分组统计
04
CASE WHEN条件逻辑
CASE WHEN语法结构 · 在数据探查中用于标记异常值 · 分类统计
CASEWHEN
05
NULL值探查
NULL的概念与影响 · 使用IS NULL/IS NOT N… · COALESCE
NULL值探查
06
重复数据探查
使用ROW_NUMBER()窗口函数 · GROUP BY + COUNT · 自连接等方法识别与统计重复记录
重复数据探查ROW
07
数据完整性探查
检查主键/外键完整性 · 必填字段空值率 · 引用完整性缺失
数据完整性探查检查主键
08
数据准确性探查
数值范围校验（BETWEEN） · 格式校验（正则/字符串函数） · 异常值检测（标准差
数据准确性探查BETWEEN
09
数据一致性探查
跨表字段逻辑一致性检查（如订单金额=… · 枚举值一致性 · 单位换算一致性
数据一致性探查跨表字段逻辑一致…
10
数据唯一性探查
使用COUNT(DISTINCT)与… · 窗口函数ROW_NUMBER()检测… · 联合唯一约束验证
数据唯一性探查COUNT
11
数据及时性与时效性探查
日期字段的过期检测 · 数据延迟天数计算 · 最新/最旧记录时间戳分析
数据时性
12
数据有效性探查
枚举值合法性检查 · 外键引用有效性 · 字段格式有效性（邮箱
数据有效性探查枚举值合法性检查
13
字符串数据质量探查
字符串长度分布 · 空字符串与空格检测 · 大小写一致性
字符串数据质量探…字符串长度分布
14
数值数据质量探查
数值分布直方图（宽表统计） · 异常极值检测 · 精度与舍入误差检查
数值数据质量探查数值分布直方图
15
日期时间数据质量探查
日期格式一致性 · 未来日期检测 · 逻辑顺序校验（开始日期<=结束日期）
日期时间数据质量…日期格式一致性
16
多表关联探查
JOIN类型回顾 · 多表关联后的数据丢失/膨胀分析 · 使用ANTI JOIN与SEMI J…
多表关联探查JOIN
17
窗口函数在数据探查中的应用
ROW_NUMBER · RANK · DENSE_RANK
窗口函数数据探查
18
数据探查自动化脚本编写
使用SQL脚本批量生成探查报表 · 动态SQL拼接 · 存储过程封装探查逻辑
数据探查自动化脚…SQL
19
元数据与数据字典探查
查询INFORMATION_SCHE… · 字段类型 · 注释
元数据数据字典探查
20
数据质量评分卡设计
定义评分规则与权重 · 使用SQL计算各维度得分 · 汇总生成数据质量健康度分数
数据质量评分卡设…定义评分规则
21
异常数据标记与告警
使用CASE WHEN标记异常等级 · 创建质量标记字段 · 生成告警日志表
异常数据标记告警
22
数据质量报告生成
使用SQL生成HTML/CSV格式的… · 汇总统计表 · 趋势对比
数据质量报告生成SQL
23
实战案例一
电商订单数据质量探查——完整性 · 准确性 · 一致性全面诊断
实战案例一电商订单数据质量…
24
实战案例二
金融交易数据质量探查——金额精度 · 时间顺序 · 重复交易检测
实战案例二金融交易数据质量…
25
实战案例三
医疗健康数据质量探查——患者信息完整… · 诊断编码有效性 · 日期逻辑校验
实战案例三医疗健康数据质量…
26
实战案例四
日志数据质量探查——时间戳连续性 · 字段缺失率 · 异常IP检测
实战案例四日志数据质量探查
27
数据质量探查工具与平台
SQL与Python/Excel结合 · 开源工具（Great Expecta… · dbt test）简介
数据质量探查工具平台
28
数据质量治理流程
探查→评估→修复→监控闭环 · 数据质量SLA制定 · 问题跟踪与根因分析
数据质量治理流程探查→评估→修复…
29
SQL性能优化在探查中的应用
索引优化 · 分区裁剪 · 避免全表扫描
SQL性能优化
30
课程总结与进阶路径
数据质量探查知识体系回顾 · 推荐学习资源 · 数据治理工程师成长路线图
课程总结进阶路径