VIP20
本课程属于：020-风控数据质量标签口径校准 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

模型训练数据质量提升方法

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
数据质量概述
数据质量的定义 · 数据质量的重要性 · 数据质量对模型性能的影响
数据质量概述数据质量的定义
02
数据采集策略
明确采集目标 · 确定数据源类型 · 设计采集方案
数据采集策略明确采集目标
03
数据标注规范
标注任务定义 · 标注指南编写 · 标注类别体系设计
数据标注规范标注任务定义
04
数据清洗基础
缺失值处理（删除 · 填充 · 插值）
数据清洗基础缺失值处理
05
数据格式标准化
统一数据格式 · 编码转换 · 日期时间标准化
数据格式标准化统一数据格式
06
数据去重技术
精确去重 · 模糊去重 · 基于哈希的去重
数据去重技术精确去重
07
异常值检测方法
统计方法（Z-score · IQR） · 基于距离的方法
异常值检测方法Z-score
08
数据平衡处理
类别不平衡问题 · 欠采样方法 · 过采样方法（SMOTE等）
数据平衡处理类别不平衡问题
09
数据增强技术
图像数据增强（翻转 · 旋转 · 裁剪）
数据增强技术图像数据增强
10
数据标注质量评估
标注准确率计算 · 标注一致性检验（Kappa系数） · 标注错误类型分析
数据标注质量评估标注准确率计算
11
数据标注纠错
标注错误识别 · 标注修正流程 · 多人标注仲裁机制
数据标注纠错标注错误识别
12
数据分布分析
数据分布可视化 · 分布偏移检测 · 训练集与测试集分布一致性
数据分布分析数据分布可视化
13
数据相关性分析
特征相关性计算（Pearson · Spearman） · 多重共线性检测
数据相关性分析Pearson
14
数据噪声过滤
噪声类型识别 · 基于滤波的降噪 · 基于模型的噪声识别
数据噪声过滤噪声类型识别
15
数据一致性检查
跨字段一致性验证 · 逻辑约束检查 · 业务规则校验
数据一致性检查跨字段一致性验证
16
数据完整性保障
完整性定义 · 缺失模式分析 · 数据补全策略
数据完整性保障完整性定义
17
数据时效性管理
数据新鲜度评估 · 数据过期检测 · 数据更新策略
数据时效性管理数据新鲜度评估
18
数据隐私与安全
数据脱敏技术（k-匿名 · 差分隐私） · 敏感数据识别
数据隐私安全
19
数据质量度量指标
完整性指标 · 准确性指标 · 一致性指标
数据质量度量指标完整性指标
20
数据质量监控体系
实时监控架构设计 · 质量指标采集 · 告警阈值设置
数据质量监控体系实时监控架构设计
21
数据质量自动化工具
开源工具介绍（Great Expec… · Deequ等） · 自定义规则引擎
数据质量自动化工…Great
22
数据血缘与溯源
数据血缘概念 · 血缘关系图构建 · 数据来源追踪
数据血缘溯源
23
数据质量根因分析
质量问题分类 · 根因分析方法（5Why · 鱼骨图）
数据质量根因分析质量问题分类
24
数据质量改进流程
PDCA循环在数据质量中的应用 · 问题发现-分析-改进-验证闭环 · 持续改进机制
数据质量改进流程PDCA
25
数据质量团队建设
角色与职责定义 · 数据质量工程师技能要求 · 跨团队协作机制
数据质量团队建设角色
26
数据质量与模型性能关联
数据质量对准确率的影响 · 数据质量对鲁棒性的影响 · 数据质量对泛化能力的影响
数据质量模型性能关联
27
数据质量案例分析（一）
图像分类数据质量问题案例 · 文本分类数据质量问题案例 · 语音识别数据质量问题案例
数据质量案例分析图像分类数据质量…
28
数据质量案例分析（二）
推荐系统数据质量问题案例 · 时序预测数据质量问题案例 · NLP大模型数据质量问题案例
数据质量案例分析推荐系统数据质量…
29
数据质量最佳实践
数据质量 checklist · 数据质量成熟度模型 · 行业标准参考（ISO 8000等）
数据质量最佳实践checklist
30
课程总结与展望
核心知识点回顾 · 数据质量未来趋势（AI辅助数据质量 · 自动化数据治理）
课程总结核心知识点回顾