所属分类：综合补充资料 当前为单品课程，可返回上一级继续浏览同方向资料。

← 返回上一级

← 返回所属目录咨询 / 购买

ETL工程师从入门到精通

共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

ETL的定义 · 在数据工程中的位置 · 学习路径与职业前景

课程导入ETL

数据仓库基础

数据仓库概念 · 维度建模（星型/雪花型） · OLTP与OLAP区别

数据仓库基础数据仓库概念

ETL核心概念

抽取 · 转换 · 加载的详细定义

ETL核心概念

数据源与连接

常见数据源类型（关系型 · 文件 · API

数据源连接

数据抽取策略

全量抽取 · 增量抽取（时间戳/CDC） · 抽取性能优化

数据抽取策略全量抽取

数据清洗与质量

处理缺失值 · 重复数据 · 异常值

数据清洗质量

数据转换技术

字段映射 · 数据类型转换 · 字符串处理

数据转换技术字段映射

数据加载方式

全量加载 · 增量加载 · upsert（合并）

数据加载方式全量加载

ETL工具入门

常用ETL工具（如Informati… · DataStage · Talend）的安装与基本操作

ETL工具入门

开源ETL工具实战

使用Apache NiFi或Kett…

SQL在ETL中的应用

复杂SQL查询 · 窗口函数 · CTE

使用Pandas · PySpark进行数据抽取 · 清洗和转换的实战

ETL调度与自动化

使用cron · Airflow · DolphinScheduler等工…

ETL日志与监控

日志记录 · 错误处理 · 重试机制

数据血缘与元数据管理

数据血缘概念 · 元数据采集 · 影响分析

数据血缘元数据管理

ETL性能优化

并行处理 · 分区 · 索引

ETL性能优化

数据安全与合规

数据脱敏 · 加密 · 访问控制

数据安全合规

实时ETL与流处理

Kafka · Flink · Spark Streaming在实时…

云上ETL实践

AWS Glue · Azure Data Factory · Google Dataflow等云服…

ETL与数据湖

数据湖架构 · ELT模式 · 与Hadoop/Spark生态集成

案例实战一

从MySQL抽取数据到Postgre… · 完成清洗与转换

案例实战一MySQL

案例实战二

从CSV/Excel文件抽取数据 · 进行标准化并加载到数据仓库

案例实战二CSV/Excel

案例实战三

使用CDC实现增量抽取 · 并处理删除记录

案例实战三CDC

案例实战四

构建一个完整的日度ETL管道 · 包含调度 · 监控和告警

案例实战四ETL

常见问题排查

数据不一致 · 性能瓶颈 · 连接失败

常见问题排查数据不一致

ETL测试与质量保障

单元测试 · 集成测试 · 数据验证

ETL架构设计

分层架构（ODS · DWD · DWS）

ETL架构设计

ETL与数据治理

数据标准 · 数据质量规则 · 数据生命周期管理

ETL数据治理

综合项目实战

从多源异构数据源构建企业级数据仓库 · 完成全流程ETL

综合项目实战从多源异构数据源…

职业发展与进阶

ETL工程师技能树 · 面试要点 · 向数据工程师/架构师转型路径

职业发展进阶