VIP20
本课程属于：088-Databricks Lakehouse数据平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Databricks平台迁移与现代化改造

共计 30 章节
可可资料掘金营 · 点击在线试看
01
迁移与现代化改造总览
目标=Databricks平台的核心… · 迁移驱动力 · 现代化改造的典型场景与整体方法论
迁移现代化改造总览
02
源平台评估与迁移就绪度分析
目标=盘点现有Hadoop/Spar… · 识别技术债 · 评估迁移复杂度与优先级
源平台评估迁移就绪度分析
03
目标架构设计
目标=Databricks Lake… · 计算与存储分离 · Unity Catalog治理层
目标架构设计Databricks
04
数据资产发现与分类
目标=元数据采集 · 数据血缘分析 · 敏感数据识别
数据资产发现分类
05
存储层迁移策略
目标=从HDFS/S3/ADLS到云… · 数据格式转换 · 增量同步与一致性校验
存储层迁移策略HDFS/S3/ADLS
06
计算层迁移
目标=从自建Spark/Hive到D… · 运行时版本选择 · 库依赖管理
计算层迁移Spark/Hive
07
ETL/ELT管道迁移
目标=从Informatica/Da…
ETL/ELT管道迁移
08
调度与编排迁移
目标=从Airflow/Oozie/… · 依赖管理与错误处理
调度编排迁移
09
数据仓库现代化
目标=从传统数仓到Delta Lak… · 维度建模与Data Vault的落地…
数据仓库现代化Delta
10
流处理迁移与现代化
目标=从Kafka/Spark St…
流处理迁移现代化
11
机器学习工作负载迁移
目标=从本地/自建ML平台到MLfl… · Feature Store · Model Serving的适配与优…
机器学习工作负载…ML
12
BI与报表层迁移
目标=从传统BI工具到Databri… · 查询加速与语义层建设
BI报表层迁移
13
安全与合规迁移
目标=从Kerberos/Range… · 行级/列级安全与审计
安全合规迁移
14
网络与连接迁移
目标=从本地数据中心到云网络的VPN… · 防火墙与端点策略
网络连接迁移
15
身份与访问管理集成
目标=从LDAP/AD到Azure… · SCIM同步与服务主体管理
身份访问管理集成
16
迁移工具与自动化
目标=使用Databricks Mi… · Terraform · CI/CD管道实现可重复迁移
迁移工具自动化
17
数据校验与质量保障
目标=迁移前后的行数/校验和/业务规… · 异常处理与回滚策略
数据校验质量保障
18
性能调优与成本优化
目标=集群配置 · 自动伸缩 · Photon引擎
性能调优成本优化
19
迁移中的DevOps实践
目标=Git集成 · Databricks Repos · 环境隔离
DevOps迁移
20
数据治理与元数据管理
目标=Unity Catalog的目… · 标签 · 数据分类与血缘追踪的落地
数据治理元数据管理
21
迁移项目管理
目标=里程碑规划 · 干系人沟通 · 风险登记
迁移项目管理目标=里程碑规划
22
典型迁移案例一
目标=从本地Hadoop到Datab…
典型迁移案例一Hadoop
23
典型迁移案例二
目标=从云上EMR+Redshift…
典型迁移案例二EMR+Redshift
24
典型迁移案例三
目标=从Snowflake/BigQ…
典型迁移案例三Snowflake/Bi…
25
混合与多云迁移策略
目标=跨云数据同步 · 灾备设计 · 数据驻留与合规考量
混合多云迁移策略
26
迁移后的现代化增强
目标=引入Delta Sharing · Lakehouse Federati… · Databricks SQL Ana…
迁移后的现代化增…Delta
27
AI与高级分析现代化
目标=在Databricks上构建R… · 向量搜索与LLM应用的数据基础
AI高级分析现代化
28
运维与监控体系迁移
目标=从传统监控到Databrick… · 审计日志与告警集成
运维监控体系迁移
29
迁移常见陷阱与反模式
目标=权限错配 · 数据倾斜 · 小文件问题
迁移常见陷阱反模式
30
课程总结与持续演进
目标=迁移复盘 · 现代化路线图制定 · 团队能力建设与社区资源
课程总结持续演进