VIP14
本课程属于：028-实验数据工程与质量治理 生物技术_生物工程与智能实验室 · 共 14 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

实验数据自动清洗与转换工程

共计 30 章节
可可资料掘金营 · 点击在线试看
01
实验数据清洗与转换工程导论
目标=课程定位 · 核心目标 · 实验数据全生命周期中的清洗与转换环节
实验数据清洗转换工程导论
02
实验数据常见类型与来源解析
目标=传感器时序数据 · 仪器导出表格 · 日志文本
实验数据常见类型来源解析
03
实验数据质量评估体系
目标=完整性 · 一致性 · 准确性
实验数据质量评估…目标=完整性
04
实验数据探查与剖析实战
目标=使用统计摘要 · 分布可视化 · 缺失模式图
实验数据探查剖析实战
05
缺失值处理工程
目标=缺失机制识别 · 删除策略 · 均值/中位数/众数填充
缺失值处理工程目标=缺失机制识…
06
异常值检测与处理
目标=基于统计方法 · 距离方法 · 密度方法
异常值检测处理
07
重复数据与冲突记录清洗
目标=精确重复 · 近似重复 · 时间戳冲突
重复数据冲突记录清洗
08
实验数据格式规范化
目标=日期时间格式统一 · 数值精度与单位统一 · 分类编码标准化
实验数据格式规范…目标=日期时间格…
09
实验数据单位转换与量纲对齐
目标=国际单位制转换 · 量纲一致性检查 · 多仪器单位差异自动映射与转换表设计
实验数据单位转换量纲对齐
10
实验数据表结构转换
目标=宽表与长表互转 · 行列转置 · 多级表头处理
实验数据表结构转…目标=宽表
11
实验数据字段拆分与合并
目标=从复合字段提取子字段 · 地址/坐标/参数串解析 · 多字段拼接生成新标识或描述
实验数据字段拆分合并
12
实验数据编码与分类映射
目标=类别编码统一 · 本体映射 · 受控词表应用
实验数据编码分类映射
13
实验数据时间序列清洗
目标=时间戳对齐 · 重采样 · 滑动窗口平滑
实验数据时间序列…目标=时间戳对齐
14
实验数据文本字段清洗
目标=正则表达式提取 · 噪声字符去除 · 拼写纠错
实验数据文本字段…目标=正则表达式…
15
实验数据图像与信号元数据清洗
目标=EXIF信息提取与校正 · 通道信息对齐 · 采样率统一
实验数据图像信号元数据清洗
16
实验数据去噪与平滑
目标=移动平均 · Savitzky-Golay滤波 · 小波去噪
实验数据去噪平滑
17
实验数据归一化与标准化
目标=Min-Max归一化 · Z-score标准化 · 小数定标
实验数据归一化标准化
18
实验数据离散化与分箱
目标=等宽 · 等频 · 聚类分箱
实验数据离散化分箱
19
实验数据特征构造与转换
目标=多项式特征 · 交互特征 · 聚合特征
实验数据特征构造转换
20
实验数据降维与压缩转换
目标=主成分分析 · 因子分析 · 自编码器在数据压缩与去相关中的清洗转…
实验数据降维压缩转换
21
实验数据管道设计模式
目标=ETL与ELT对比 · 批处理与流处理 · 管道编排
实验数据管道设计…ETL
22
实验数据清洗转换工具链
目标=Pandas · Polars · OpenRefine
实验数据清洗转换…Pandas
23
实验数据清洗规则引擎
目标=规则定义 · 优先级 · 冲突消解
实验数据清洗规则…目标=规则定义
24
实验数据转换的脚本化与自动化
目标=Python脚本 · Shell调度 · Makefile
实验数据转换的脚…自动化
25
实验数据清洗转换的质量监控
目标=数据质量仪表盘 · 异常告警 · 数据漂移检测
实验数据清洗转换…目标=数据质量仪…
26
实验数据清洗转换的可复现性
目标=环境固化 · 随机种子控制 · 版本化数据与代码
实验数据清洗转换…目标=环境固化
27
实验数据隐私与安全清洗
目标=脱敏 · 匿名化 · 假名化
实验数据隐私安全清洗
28
大规模实验数据清洗转换性能优化
目标=分块处理 · 并行计算 · 内存管理
大规模实验数据清…目标=分块处理
29
实验数据清洗转换案例一
目标=多传感器实验平台数据整合——从…
实验数据清洗转换…目标=多传感器实…
30
实验数据清洗转换案例二
目标=高通量实验数据自动化流水线——… · 跨仪器 · 跨格式的清洗转换与交付
实验数据清洗转换…目标=高通量实验…