VIP20

本课程属于：033-数据安全与权限 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

行列权限在湖仓一体中设计与落地

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

湖仓一体概述

湖仓一体架构演进、核心概念、与传统数仓/数据湖对比、主流产品介绍。

架构对比产品

权限体系基础

访问控制模型（DAC/MAC/RBAC/ABAC）、权限粒度（系统级/库级/表级/列级/行级）、授权模型。

模型粒度授权

行级权限原理

行级安全策略（RLS）定义、谓词下推机制、策略表达式语法、性能影响分析。

RLS谓词下推性能

列级权限原理

列级安全机制、视图与掩码策略、敏感列标记、动态数据脱敏（DDM）。

列安全掩码DDM

Apache Ranger集成

Ranger架构与组件、策略管理模型、服务定义与资源映射、审计日志。

Ranger策略审计

Ranger行级过滤策略

行过滤条件配置、标签服务集成、策略优先级与合并、实战案例：按部门隔离数据。

行过滤标签隔离

Ranger列级掩码策略

掩码类型（Partial/Redact/Nullify/Date）、自定义掩码函数、策略测试与验证。

掩码自定义验证

Apache Atlas集成

Atlas元数据模型、血缘与分类、标签传播机制、与Ranger联动实现自动授权。

Atlas血缘自动授权

Delta Lake权限实践

Delta Sharing协议、表ACL控制、时间旅行与权限、Z-order与权限关系。

DeltaSharing时间旅行

Apache Iceberg权限实践

Iceberg REST Catalog鉴权、行级过滤下推、列级投影与掩码、多引擎兼容性。

IcebergREST下推

Apache Hudi权限实践

Hudi同步机制、Hive Metastore集成、行级更新与权限、增量查询权限控制。

Hudi增量同步

Spark SQL权限控制

Spark SQL扩展点、自定义规则注入、DataFrame API权限拦截、Catalyst优化器与权限。

SparkCatalyst拦截

Flink SQL权限控制

Flink权限架构、Table API权限、CDC同步权限、动态表权限刷新。

FlinkCDC动态刷新

Presto/Trino权限控制

Presto访问控制插件、系统级/目录级/模式级权限、行级过滤实现、连接器权限映射。

PrestoTrino插件

Hive权限实践

Hive SQL标准授权、存储权限（POSIX/ACL）、Ranger集成Hive、行级过滤在Hive中的实现。

多引擎统一权限

统一权限策略中心、策略同步机制、跨引擎策略一致性、冲突解决策略。

统一同步一致性

数据脱敏技术

静态脱敏（SDM）与动态脱敏（DDM）、脱敏算法（替换/遮蔽/泛化/扰动）、脱敏策略编排。

审计与合规

审计日志采集与分析、合规报告生成、GDPR/CCPA合规实践、异常行为检测。

审计GDPR异常检测

标签与分类驱动权限

数据分类体系、自动标签生成、基于标签的策略推导、标签生命周期管理。

标签分类生命周期

ABAC（属性基访问控制）

用户属性/资源属性/环境属性、策略评估引擎、复杂条件组合、与RBAC结合。

数据网格与权限

数据产品权限模型、联邦治理、跨域数据共享、自助服务权限申请。

数据网格联邦自助

实时权限同步

CDC权限变更捕获、分布式缓存权限同步、策略热加载、最终一致性保证。

CDC热加载一致性

权限策略缓存、谓词下推优化、分区裁剪与权限、查询计划剪枝。

缓存谓词下推剪枝

大规模租户隔离

多租户架构、资源隔离与权限隔离、租户级策略模板、租户自管理权限。

多租户隔离模板

权限测试方法论

测试策略设计、边界条件测试、性能压力测试、自动化测试框架。

测试边界自动化

权限迁移与升级

从传统数仓迁移、策略导出导入、版本兼容性、回滚方案。

迁移兼容回滚

云原生湖仓权限

AWS Lake Formation、Azure Purview、GCP Dataplex、阿里云DLF权限对比。

云原生AWSAzure

安全最佳实践

最小权限原则、职责分离、权限生命周期管理、应急响应流程。

最小权限生命周期应急

金融行业：客户数据隔离、医疗行业：HIPAA合规、电商行业：多租户数据隔离。

金融医疗电商

零信任架构、AI驱动权限推荐、可观测权限、数据安全一体化。

零信任AI可观测