VIP20

本课程属于：083-密码服务高可用审计日志巡检 密码学工程与数据安全 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

异步缓冲区写入瓶颈优化实践

共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

异步编程基础

理解异步IO · 协程 · 事件循环的基本概念

异步编程基础IO

缓冲区与缓存机制

缓冲区的作用 · 缓存策略 · 写入缓冲区设计

缓冲区缓存机制

写入瓶颈的成因

磁盘IO瓶颈 · 网络延迟 · 锁竞争

写入瓶颈的成因IO

同步写入的局限

阻塞调用 · 资源浪费 · 性能差

同步写入的局限阻塞调用

异步写入的优势

非阻塞 · 高并发 · 资源利用率高

异步写入的优势非阻塞

Python asyncio入门

async/await语法 · 事件循环运行

协程调度与状态机

协程的生命周期 · 调度原理

协程调度状态机

基于asyncio的文件写入

aiofiles库 · 异步文件操作

环形缓冲区实现

数据结构 · 读写指针 · 无锁设计

环形缓冲区实现数据结构

多生产者多消费者模型

队列 · 信号量 · 条件变量

多生产者多消费者…队列

无锁缓冲队列

利用原子操作 · 内存屏障

无锁缓冲队列利用原子操作

批量写入策略

合并小写入 · 批量提交 · 定时刷新

批量写入策略合并小写入

控制生产速度 · 流控制 · 限制缓冲区大小

背压机制控制生产速度

写入性能基准测试

测量吞吐量 · 延迟 · 资源使用

写入性能基准测试测量吞吐量

异步网络写入

asyncio socket · 连接池 · 非阻塞发送

异步网络写入asyncio

数据库异步写入

asyncpg · aiomysql · 批量插入

数据库异步写入asyncpg

替换默认事件循环 · 性能对比

内存屏障与可见性

volatile · 同步原语 · 多线程安全

内存屏障可见性

异步上下文管理器

with async语句 · 资源管理

异步上下文管理器with

异步生成器与流式传输

yield from · 异步迭代

异步生成器流式传输

写入压缩优化

zlib · lz4 · 压缩与吞吐量权衡

写入压缩优化zlib

日志系统异步写入

loguru · 异步handler · 性能监控

日志系统异步写入loguru

消息队列写入优化

RabbitMQ · Kafka异步生产者

消息队列写入优化RabbitMQ

监控与诊断工具

cProfile · asyncio调试 · 火焰图

监控诊断工具

回调地狱 · 异常处理 · 死锁

常见陷阱回调地狱

减少上下文切换

任务合并 · 协程复用 · 事件循环优化

减少上下文切换任务合并

高性能异步写入框架设计：架构模式 · 组件

高性能异步写入框…架构模式

实现一个异步日志采集器：需求 · 编码 · 测试

实现一个异步日志…需求

性能调优案例

真实项目瓶颈分析与优化

性能调优案例真实项目瓶颈分析

总结与最佳实践

设计原则 · 常见模式 · 未来趋势

最佳实践设计原则