VIP20
本课程属于：009-供应链数据集成 供应链数字化与智能采购系统 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

TMS运费数据质量：里程与费用字段的异常值清洗方案

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
TMS运费数据质量的重要性 · 里程与费用异常对业务的影响 · 课程目标与学习路径
课程导论TMS
02
数据质量基础
数据质量六大维度（准确性 · 完整性 · 一致性
数据质量基础数据质量六大维度
03
TMS数据模型概览
典型TMS系统的运费相关表结构 · 字段定义（里程 · 费用
TMS数据模型概览
04
里程字段的业务含义
实际里程 · 规划里程 · 计费里程的区别与常见数据来源（GPS
里程字段的业务含…实际里程
05
费用字段的业务含义
基础运费 · 附加费 · 燃油附加费
费用字段的业务含…基础运费
06
异常值定义与分类
全局异常 · 局部异常 · 上下文异常
异常值定义分类
07
数据采集与探查
使用Pandas读取TMS导出数据 · info() · describe()
数据采集探查
08
缺失值处理策略
里程/费用缺失的删除 · 均值/中位数填充 · 模型预测填充
缺失值处理策略里程
09
重复值检测与去重
基于运单号 · 时间戳 · 里程+费用组合键的完全重复与近似重复…
重复值检测去重
10
里程异常值检测——统计方法
Z-Score · IQR（四分位距）原理与Python…
里程异常值检测统计方法
11
里程异常值检测——距离方法
基于DBSCAN聚类的里程离群点检测…
里程异常值检测距离方法
12
里程异常值检测——业务规则
里程为0 · 里程为负数 · 里程超过理论最大值的业务阈值设定
里程异常值检测业务规则
13
费用异常值检测——统计方法
Z-Score · IQR在费用字段的应用与多分位数对比
费用异常值检测统计方法
14
费用异常值检测——回归方法
基于里程-费用线性回归的残差分析识别…
费用异常值检测回归方法
15
费用异常值检测——比率分析
费用/里程 · 费用/重量 · 费用/体积的比率异常检测
费用异常值检测比率分析
16
多字段联合异常检测
里程与费用同时异常 · 里程正常但费用异常 · 费用正常但里程异常的交叉分析
多字段联合异常检…里程
17
时间序列异常检测
同一线路不同时间段的里程/费用波动检… · STL分解）
时间序列异常检测同一线路不同时间…
18
数据标准化与归一化
Min-Max · Z-Score标准化对异常检测结果的…
数据标准化归一化
19
清洗流程设计
从原始数据到干净数据的ETL管道设计…
清洗流程设计ETL
20
自动化清洗脚本开发
Python脚本封装异常检测函数 · 定时任务调度（Airflow/Cro…
自动化清洗脚本开…Python
21
可视化辅助分析
使用Matplotlib/Seabo… · 散点图 · 分布图辅助异常识别
可视化辅助分析Matplotlib/S…
22
交互式数据质量看板
基于Plotly/Dash构建里程与…
交互式数据质量看…Plotly/Dash
23
业务规则引擎集成
将清洗规则配置化 · 通过规则引擎（如Drools）动态管…
业务规则引擎集成将清洗规则配置化
24
数据质量度量与报告
定义DQ Score · 异常率 · 修复率等KPI
数据质量度量报告
25
案例实战一
某物流企业里程数据异常清洗全流程（G… · 人工误录 · 地图API回传错误）
案例实战一某物流企业里程数…
26
案例实战二
某电商平台运费费用异常清洗（重复计费 · 附加费计算错误 · 燃油费未更新）
案例实战二某电商平台运费费…
27
案例实战三
多源数据融合场景下的里程与费用对齐清…
案例实战三多源数据融合场景…
28
清洗效果评估
清洗前后数据分布对比 · 业务指标改善（运费准确率 · 对账差异率）
清洗效果评估清洗前后数据分布…
29
常见陷阱与最佳实践
过度清洗 · 误删正常数据 · 阈值设定主观性
常见陷阱最佳实践
30
课程总结与展望
数据质量持续治理体系 · AI辅助异常检测趋势 · TMS数据中台建设方向
课程总结数据质量持续治理…