首页
›
生物技术_生物工程与智能实验室
›
028-实验数据工程与质量治理
›
《实验数据批流一体处理工程》
VIP14
本课程属于:028-实验数据工程与质量治理
生物技术_生物工程与智能实验室 · 共 14 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
📘
实验数据批流一体处理工程
共计 30 章节
可可资料掘金营 · 点击在线试看
01
实验数据批流一体处理工程导论
目标=实验数据来源 · 批流一体概念 · 工程目标
实验数据批流一体…
目标=实验数据来…
02
实验数据采集与接入
目标=传感器 · 日志 · 数据库
实验数据采集
接入
03
实验数据质量与预处理
目标=缺失值 · 异常值 · 噪声处理
实验数据质量
预处理
04
批流一体存储选型
目标=对象存储 · 分布式文件系统 · 消息队列
批流一体存储选型
目标=对象存储
05
实验数据建模与Schema设计
目标=批流统一Schema · 模式演进 · 元数据管理
Schema
实验数据建模
06
批处理引擎核心原理
目标=MapReduce · Spark批处理 · Flink批处理模式
批处理引擎核心原…
MapReduce
07
流处理引擎核心原理
目标=Flink · Spark Streaming · Kafka Streams
流处理引擎核心原…
Flink
08
批流一体计算框架
目标=Apache Flink批流一… · Spark Structured S… · Beam模型
批流一体计算框架
Apache
09
实验数据批流一体ETL
目标=批流统一抽取 · 转换 · 加载流程
ETL
实验数据批流一体
10
实验数据窗口与聚合
目标=滚动窗口 · 滑动窗口 · 会话窗口
实验数据窗口
聚合
11
实验数据状态管理与容错
目标=状态后端 · 检查点 · 保存点
实验数据状态管理
容错
12
实验数据时间语义与乱序处理
目标=事件时间 · 处理时间 · 摄入时间
实验数据时间语义
乱序处理
13
批流一体数据管道编排
目标=Airflow · Dagster · Flink SQL作业调度
批流一体数据管道…
Airflow
14
实验数据实时监控与告警
目标=指标采集 · Prometheus · Grafana
实验数据实时监控
告警
15
实验数据批流一体查询
目标=OLAP引擎 · Presto · ClickHouse
实验数据批流一体…
OLAP
16
实验数据批流一体机器学习
目标=特征工程批流统一 · 在线学习 · 模型推理管道
实验数据批流一体…
目标=特征工程批…
17
实验数据批流一体图处理
目标=图数据流 · 动态图算法 · 批流图计算框架
实验数据批流一体…
目标=图数据流
18
实验数据批流一体安全与权限
目标=认证 · 授权 · 加密
实验数据批流一体…
权限
19
实验数据批流一体性能优化
目标=并行度 · 资源调度 · 反压处理
实验数据批流一体…
目标=并行度
20
实验数据批流一体成本控制
目标=存储分层 · 计算资源竞价 · 数据生命周期管理
实验数据批流一体…
目标=存储分层
21
实验数据批流一体测试策略
目标=单元测试 · 集成测试 · 端到端测试
实验数据批流一体…
目标=单元测试
22
实验数据批流一体部署与运维
目标=容器化 · Kubernetes · CI/CD
实验数据批流一体…
运维
23
实验数据批流一体云原生实践
目标=Serverless · 托管服务 · 混合云
实验数据批流一体…
Serverless
24
实验数据批流一体案例一
目标=物理实验传感器数据实时采集与离…
实验数据批流一体…
目标=物理实验传…
25
实验数据批流一体案例二
目标=生物实验测序数据流式质控与批量…
实验数据批流一体…
目标=生物实验测…
26
实验数据批流一体案例三
目标=化学实验反应过程监控与历史数据…
实验数据批流一体…
目标=化学实验反…
27
实验数据批流一体案例四
目标=材料实验多模态数据融合与实时表…
实验数据批流一体…
目标=材料实验多…
28
实验数据批流一体案例五
目标=天文观测数据流批协同处理与事件…
实验数据批流一体…
目标=天文观测数…
29
实验数据批流一体工程综合实战
目标=从需求到部署 · 构建完整实验数据批流一体处理系统
实验数据批流一体…
目标=从需求到部…
30
实验数据批流一体前沿与展望
目标=流批融合新趋势 · AI增强 · 量子计算实验数据
实验数据批流一体…
目标=流批融合新…
所属VIP或分类
同VIP:多源实验数据对账与一致性工程
同VIP:实验数据修复与质量闭环工程
同VIP:实验数据变更影响与回归验证工程