Detect memory leaks of C extensions with psutil and psleak
5 months ago
- #Python
- #Cextensions
- #MemoryLeaks
- Python C扩展中的内存泄漏很难通过RSS和VMS等传统指标诊断
- psutil 7.2.0引入了heap_info()和heap_trim()等新API用于C堆内存分析以检测原生泄漏
- 这些API绕过了Python的内存管理机制，可直接探查平台原生分配器的状态
- 许多Python项目依赖C扩展（如NumPy、pandas、PyTorch等），使得原生泄漏检测至关重要
- heap_info()提供heap_used和mmap_used等指标来追踪C层级的内存分配
- heap_trim()能减少分配器噪音，使泄漏检测更清晰
- 新工具psleak通过重复运行函数并追踪内存增长来自动化泄漏检测
- psleak已集成到psutil的测试套件中，确保其C代码没有内存泄漏
- 监控C堆内存对于检测不影响Python引用计数或RSS的泄漏至关重要
- psutil 7.2.0增强了可观测性，使其成为诊断C扩展泄漏的调试工具