VIP20

本课程属于：026-数据湖治理 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

数据湖权限策略设计与实施

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

数据湖权限概述

什么是数据湖权限、为什么需要权限策略、权限策略的核心目标。

数据湖架构基础

数据湖分层架构（Bronze/Silver/Gold）、数据湖存储格式（Parquet/Delta/Iceberg）、数据湖计算引擎（Spark/Flink/Trino）。

架构存储计算

访问控制模型

RBAC（基于角色的访问控制）、ABAC（基于属性的访问控制）、MAC（强制访问控制）、DAC（自主访问控制）。

数据湖权限模型设计

数据湖权限模型的核心要素、权限粒度设计（库/表/列/行级）、权限继承与覆盖规则。

身份认证与集成

LDAP/AD集成、OAuth2.0与SSO、服务账号与M2M认证、多因素认证（MFA）。

数据湖存储层权限

AWS S3 Bucket Policy、Azure Blob Storage RBAC、GCP Cloud Storage IAM、HDFS ACL与POSIX权限。

数据湖计算引擎权限（Spark）

Spark SQL权限控制、Spark Catalog权限、Spark RDD与DataFrame权限、Spark Thrift Server权限。

数据湖计算引擎权限（Flink）

Flink SQL权限、Flink CDC权限、Flink State访问控制、Flink Job权限隔离。

数据湖计算引擎权限（Trino）

Trino Catalog权限、Trino Connector权限、Trino用户与角色管理、Trino查询审计。

数据湖元数据权限

Hive Metastore权限、AWS Glue Catalog权限、Unity Catalog权限、Polaris Catalog权限。

元数据Catalog

数据湖文件级权限

文件ACL与权限位、文件加密与访问控制、文件生命周期管理、文件共享与链接。

数据湖列级与行级权限

列级掩码（Column Masking）、行级过滤（Row Filter）、动态数据脱敏、数据标签与分类。

列级行级脱敏

数据湖审计与监控

审计日志收集（CloudTrail/Azure Monitor）、审计日志存储与分析、实时告警与异常检测、合规报告生成。

数据湖权限策略语言

AWS IAM Policy语法、Azure Policy语法、GCP IAM Policy语法、通用Policy语言（OPA/Sentinel）。

数据湖权限策略最佳实践

最小权限原则、职责分离（SoD）、权限生命周期管理、权限自动化与IaC。

最佳实践自动化

数据湖跨账户/跨项目权限

跨账户角色扮演（STS）、资源策略与信任策略、数据共享与Lake Formation、跨项目资源链接。

跨账户共享

数据湖数据加密与密钥管理

静态加密（SSE-S3/KMS）、传输加密（TLS/mTLS）、客户端加密、密钥轮转与生命周期。

数据湖隐私合规

GDPR数据权限要求、CCPA数据权限要求、数据主权与本地化、数据保留与删除策略。

数据湖权限测试与验证

权限测试用例设计、自动化权限测试框架、权限渗透测试、权限回归测试。

数据湖权限策略的CI/CD集成

权限即代码（Policy as Code）、GitOps权限管理、权限策略自动化部署、权限策略版本控制。

数据湖权限策略的故障排查

常见权限错误（Access Denied/Unauthorized）、权限调试工具、日志分析与根因定位、权限回滚策略。

数据湖权限策略的性能优化

权限评估性能、缓存策略、权限策略简化、权限评估路径优化。

数据湖权限策略的扩展性设计

大规模用户与角色管理、权限策略分片、权限策略分布式评估、权限策略热加载。

扩展性大规模

数据湖权限策略的灾难恢复

权限策略备份与恢复、权限策略跨区域复制、权限策略一致性检查、权限策略灾难演练。

数据湖权限策略的成本控制

权限评估成本、权限存储成本、权限审计成本、权限策略优化降本。

数据湖权限策略的文档与培训

权限策略文档规范、权限策略知识库、权限策略培训计划、权限策略认证体系。

数据湖权限策略的演进与迭代

权限策略版本演进、权限策略兼容性、权限策略废弃与迁移、权限策略技术债务管理。

数据湖权限策略的行业案例

金融行业数据湖权限实践、医疗行业数据湖权限实践、电商行业数据湖权限实践、制造业数据湖权限实践。

数据湖权限策略的未来趋势

零信任架构在数据湖中的应用、AI驱动的权限策略优化、数据网格与联邦权限、数据湖权限标准化。

趋势零信任

数据湖权限策略综合实战

从零搭建数据湖权限体系、权限策略设计评审、权限策略落地与验收、权限策略持续运营。