VIP20
本课程属于：092-Elastic企业搜索与可观测性平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Elastic数据质量与元数据治理

共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入与全景认知
目标=Elastic数据质量与元数据… · 边界 · 核心挑战
课程导入全景认知
02
Elastic数据资产盘点
目标=索引 · 别名 · 数据流
Elastic数据资产盘点
03
元数据采集机制
目标=通过_cluster/stat… · _cat API · _nodes/stats
元数据采集机制cluster/stat
04
元数据模型设计
目标=设计索引元数据 · 字段元数据 · 血缘元数据
元数据模型设计目标=设计索引元…
05
字段级元数据管理
目标=映射解析 · 字段类型 · 分词器
字段级元数据管理目标=映射解析
06
数据质量维度定义
目标=完整性 · 准确性 · 一致性
数据质量维度定义目标=完整性
07
质量规则引擎设计
目标=基于Painless脚本 · Ingest Pipeline · Logstash Filter构建可…
质量规则引擎设计Painless
08
空值与缺失值治理
目标=识别null · 空字符串 · 缺失字段
空值缺失值治理
09
重复数据检测与去重
目标=基于聚合 · collapse · 指纹哈希的重复文档识别与去重实战
重复数据检测去重
10
数据一致性校验
目标=跨索引 · 跨集群 · 跨版本的数据比对方法与工具实现
数据一致性校验目标=跨索引
11
时效性监控
目标=基于@timestamp · ingest_time · event_time的延迟计算与SL…
时效性监控timestamp
12
数据剖析与统计画像
目标=使用聚合 · 直方图 · 百分位数
数据剖析统计画像
13
异常检测与质量告警
目标=基于Watcher · ElastAlert · 机器学习异常检测的质量事件触发与通知
异常检测质量告警
14
元数据血缘追踪
目标=从数据源到Ingest到索引到…
元数据血缘追踪Ingest
15
数据目录与检索
目标=基于Elasticsearch… · 标签 · 分类与自助发现门户
数据目录检索
16
质量评分卡设计
目标=为索引 · 字段 · 数据集设计多维度质量评分模型与趋势看…
质量评分卡设计目标=为索引
17
Ingest Pipeline质量嵌入
目标=在数据写入阶段嵌入校验 · 清洗 · 标准化
IngestPipeline
18
Logstash与Beats质量管控
目标=在采集层实现字段校验 · 类型转换 · 去重与错误路由
LogstashBeats
19
索引模板与映射治理
目标=通过组件模板 · 索引模板 · 动态模板强制元数据规范与质量约束
索引模板映射治理
20
ILM与数据生命周期治理
目标=结合热温冷架构设计质量保留策略 · 归档校验与删除审计
ILM数据生命周期治理
21
快照与恢复质量验证
目标=快照完整性检查 · 恢复后数据一致性校验与元数据比对
快照恢复质量验证
22
跨集群与跨环境元数据同步
目标=CCR · 远程集群 · 快照迁移场景下的元数据一致性与质量保…
跨集群跨环境元数据同步
23
权限与元数据安全
目标=基于RBAC · 字段级安全 · 文档级安全的元数据可见性与质量数据保…
权限元数据安全
24
质量事件管理与工单闭环
目标=从告警到分派 · 修复 · 验证
质量事件管理工单闭环
25
元数据版本与变更管理
目标=索引映射变更 · Pipeline变更 · 模板变更的版本记录与影响分析
元数据版本变更管理
26
数据质量度量与KPI体系
目标=定义可量化指标 · 采集方法 · 报表设计与治理成熟度评估
KPI数据质量度量
27
实战项目一
目标=构建电商订单索引的元数据目录与…
实战项目一目标=构建电商订…
28
实战项目二
目标=实现日志数据流的端到端血缘追踪…
实战项目二目标=实现日志数…
29
实战项目三
目标=设计并落地多集群元数据同步与质…
实战项目三目标=设计并落地…
30
课程总结与治理路线图
目标=回顾核心方法 · 工具链整合 · 持续改进与组织落地建议
课程总结治理路线图