VIP20
本课程属于：011-工业物联网安全网关 物联网安全与设备身份认证 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

工业IoT网关遥测过滤与应用集成

📚 共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
第1章
遥测数据基础
什么是遥测数据、遥测数据格式（JSON/Protobuf）、数据采集原理。
数据格式采集
第2章
过滤机制概述
为什么需要过滤、过滤的三种模式（白名单/黑名单/正则）、过滤性能指标。
白名单黑名单正则
第3章
环境搭建
Python环境配置、依赖库安装（pandas、re、json）、测试数据集准备。
Pythonpandas环境
第4章
JSON数据解析
json.loads与json.dumps实战、嵌套JSON处理、异常数据捕获。
JSON解析异常
第5章
Protobuf数据解析
protobuf编译与安装、.proto文件定义、序列化与反序列化。
Protobuf序列化
第6章
基础过滤规则
字段级过滤、值范围过滤、时间戳过滤。
字段范围时间戳
第7章
正则表达式入门
re模块基础、常用元字符、贪婪与非贪婪模式。
正则re元字符
第8章
正则过滤实战
IP地址过滤、日志级别过滤、特定模式提取。
IP日志提取
第9章
白名单过滤
白名单定义、动态白名单更新、性能优化。
白名单动态性能
第10章
黑名单过滤
黑名单策略、黑名单与白名单组合、误报处理。
黑名单组合误报
第11章
多条件过滤
AND/OR逻辑组合、优先级控制、复杂条件链。
AND/OR优先级条件链
第12章
流式过滤
生成器模式、逐行处理大文件、内存控制。
生成器大文件内存
第13章
高性能过滤
使用numpy加速、向量化操作、C扩展调用。
numpy向量化C扩展
第14章
过滤链模式
责任链设计模式、可插拔过滤器、动态加载。
责任链可插拔动态
第15章
规则引擎
规则定义语言、规则编译、规则热更新。
规则引擎编译热更新
第16章
配置管理
YAML/JSON配置文件、环境变量覆盖、配置校验。
YAML环境变量校验
第17章
日志与监控
过滤日志记录、过滤命中率统计、告警集成。
日志命中率告警
第18章
单元测试
pytest框架、mock数据、覆盖率报告。
pytestmock覆盖率
第19章
性能测试
locust压测、吞吐量测试、延迟分析。
locust吞吐量延迟
第20章
数据脱敏
敏感字段识别、脱敏算法（掩码/替换/加密）、合规性。
脱敏掩码合规
第21章
异常处理
数据格式异常、过滤规则异常、降级策略。
异常降级容错
第22章
分布式过滤
Kafka流处理、Spark结构化流、FlinkCEP。
KafkaSparkFlink
第23章
过滤规则版本管理
Git管理规则、版本回滚、灰度发布。
Git回滚灰度
第24章
可视化过滤
Grafana仪表盘、过滤结果可视化、实时监控面板。
Grafana可视化监控
第25章
安全过滤
SQL注入检测、XSS过滤、命令注入防护。
SQL注入XSS安全
第26章
机器学习过滤
异常检测模型、特征工程、模型部署。
ML异常检测特征
第27章
边缘过滤
边缘计算场景、轻量级过滤、离线缓存。
边缘轻量离线
第28章
多租户过滤
租户隔离、资源配额、自定义规则。
多租户隔离配额
第29章
过滤结果输出
输出到文件、输出到数据库、输出到消息队列。
文件数据库MQ
第30章
综合实战
构建企业级遥测过滤平台、架构设计、部署运维。
企业级架构运维