Python高级教程 - 第2章:python内存管理与对象模型
zhezhongyun 2025-10-23 14:15 5 浏览
本章目标
掌握 Python 内存管理的核心机制,理解对象模型、引用计数、垃圾回收(GC)、内存分配优化,以及如何监控和调试内存使用。
1. Python对象模型基础
Python 中一切皆对象(整数、函数、类本身等),所有对象都存储在堆内存上。
1.1 对象结构(PyObject)
- ob_refcnt: 引用计数器
- ob_type: 指向类型对象(type)的指针
x = 42
print(type(x)) # <class 'int'>
print(id(x)) # 对象的内存地址
1.2 id() 与 is
- id(obj):返回对象的内存地址标识
- is:比较两个对象的身份(是否为同一对象)
a = 1000
b = 1000
print(a == b) # True,值相等
print(a is b) # 可能是 False,身份不同
注意: 小整数(-5~256)和部分短字符串会被缓存(intern),因此 is 可能为 True。
2. 引用计数与垃圾回收
2.1 引用计数机制
Python 主要使用引用计数回收内存:当对象引用计数为0时被立即销毁。
import sys
a = []
print(sys.getrefcount(a)) # 输出可能是 2(包含传入参数)
b = a
print(sys.getrefcount(a)) # 增加到 3
del b
print(sys.getrefcount(a)) # 减少到 2
2.2 循环引用与垃圾回收器(gc模块)
当两个对象互相引用,引用计数不会归零,需靠 GC 处理。
import gc
a = {}
b = {}
a['x'] = b
b['x'] = a
# 手动触发垃圾回收
collected = gc.collect()
print('collected:', collected)
2.3 GC 分代回收机制
- Python 将对象分为三代(0、1、2)
- 年轻对象更频繁回收
- 存活久的对象会被提升到高一代以减少扫描成本
import gc
print(gc.get_threshold()) # (700, 10, 10)
3. 内存分配与优化
3.1 pymalloc 内存池
- Python 为小对象(<512字节)使用内存池,提高分配效率
- 减少频繁的系统调用 malloc/free
3.2 避免内存碎片
- 频繁创建和销毁大量小对象会造成内存碎片
- 解决:使用对象池(如 queue)、重用对象、使用生成器
3.3 使用 __slots__ 降低内存占用
class Point:
__slots__ = ('x', 'y') # 禁用 __dict__,节省内存
def __init__(self, x, y):
self.x = x
self.y = y
p = Point(1, 2)
print(p.x, p.y)
3.4 弱引用(weakref)
弱引用不会增加引用计数,常用于缓存对象,避免内存泄漏。
import weakref
class Data:
pass
data = Data()
ref = weakref.ref(data)
print(ref()) # <__main__.Data object at ...>
del data
print(ref()) # None(对象已被回收)
4. 内存监控与调试
4.1 tracemalloc 追踪内存分配
import tracemalloc
tracemalloc.start()
a = [i for i in range(100000)]
current, peak = tracemalloc.get_traced_memory()
print(f"Current: {current/1024/1024:.2f} MB; Peak: {peak/1024/1024:.2f} MB")
tracemalloc.stop()
4.2 objgraph(第三方)可视化对象引用
pip install objgraph
import objgraph
objgraph.show_most_common_types(limit=10)
5. 常见内存问题与解决策略
问题 | 原因 | 解决方案 |
内存泄漏 | 循环引用、缓存未清理 | gc.collect(),使用 weakref |
内存占用过高 | 大量小对象 | 使用 __slots__、池化对象 |
内存碎片化 | 频繁创建销毁 | 重用对象,使用生成器 |
不可释放大对象 | 全局变量持有引用 | 显式 del,清空容器 |
6. 练习题
- 实现一个对象池(Object Pool)类,避免频繁创建销毁对象。
- 编写代码制造循环引用并使用 gc 检测与清理。
- 使用 tracemalloc 监控一段代码的内存峰值。
附图建议
- 图1:Python 对象结构(引用计数+类型指针)
- 图2:GC 三代回收流程图
- 图3:tracemalloc 内存曲线示意图
(可后续补上清晰的 PNG/SVG 图示)
小结
本章深入解析了 Python 的内存管理与对象模型,包括引用计数、GC、内存池、弱引用等机制,并提供了优化与调试内存使用的方法。这些知识是编写高性能、内存友好型 Python 应用的重要基础。
相关推荐
- Python入门学习记录之一:变量_python怎么用变量
-
写这个,主要是对自己学习python知识的一个总结,也是加深自己的印象。变量(英文:variable),也叫标识符。在python中,变量的命名规则有以下三点:>变量名只能包含字母、数字和下划线...
- python变量命名规则——来自小白的总结
-
python是一个动态编译类编程语言,所以程序在运行前不需要如C语言的先行编译动作,因此也只有在程序运行过程中才能发现程序的问题。基于此,python的变量就有一定的命名规范。python作为当前热门...
- Python入门学习教程:第 2 章 变量与数据类型
-
2.1什么是变量?在编程中,变量就像一个存放数据的容器,它可以存储各种信息,并且这些信息可以被读取和修改。想象一下,变量就如同我们生活中的盒子,你可以把东西放进去,也可以随时拿出来看看,甚至可以换成...
- 绘制学术论文中的“三线表”具体指导
-
在科研过程中,大家用到最多的可能就是“三线表”。“三线表”,一般主要由三条横线构成,当然在变量名栏里也可以拆分单元格,出现更多的线。更重要的是,“三线表”也是一种数据记录规范,以“三线表”形式记录的数...
- Python基础语法知识--变量和数据类型
-
学习Python中的变量和数据类型至关重要,因为它们构成了Python编程的基石。以下是帮助您了解Python中的变量和数据类型的分步指南:1.变量:变量在Python中用于存储数据值。它们充...
- 一文搞懂 Python 中的所有标点符号
-
反引号`无任何作用。传说Python3中它被移除是因为和单引号字符'太相似。波浪号~(按位取反符号)~被称为取反或补码运算符。它放在我们想要取反的对象前面。如果放在一个整数n...
- Python变量类型和运算符_python中变量的含义
-
别再被小名词坑哭了:Python新手常犯的那些隐蔽错误,我用同事的真实bug拆给你看我记得有一次和同事张姐一起追查一个看似随机崩溃的脚本,最后发现罪魁祸首竟然是她把变量命名成了list。说实话...
- 从零开始:深入剖析 Spring Boot3 中配置文件的加载顺序
-
在当今的互联网软件开发领域,SpringBoot无疑是最为热门和广泛应用的框架之一。它以其强大的功能、便捷的开发体验,极大地提升了开发效率,成为众多开发者构建Web应用程序的首选。而在Spr...
- Python中下划线 ‘_’ 的用法,你知道几种
-
Python中下划线()是一个有特殊含义和用途的符号,它可以用来表示以下几种情况:1在解释器中,下划线(_)表示上一个表达式的值,可以用来进行快速计算或测试。例如:>>>2+...
- 解锁Shell编程:变量_shell $变量
-
引言:开启Shell编程大门Shell作为用户与Linux内核之间的桥梁,为我们提供了强大的命令行交互方式。它不仅能执行简单的文件操作、进程管理,还能通过编写脚本实现复杂的自动化任务。无论是...
- 一文学会Python的变量命名规则!_python的变量命名有哪些要求
-
目录1.变量的命名原则3.内置函数尽量不要做变量4.删除变量和垃圾回收机制5.结语1.变量的命名原则①由英文字母、_(下划线)、或中文开头②变量名称只能由英文字母、数字、下画线或中文字所组成。③英文字...
- 更可靠的Rust-语法篇-区分语句/表达式,略览if/loop/while/for
-
src/main.rs://函数定义fnadd(a:i32,b:i32)->i32{a+b//末尾表达式}fnmain(){leta:i3...
- C++第五课:变量的命名规则_c++中变量的命名规则
-
变量的命名不是想怎么起就怎么起的,而是有一套固定的规则的。具体规则:1.名字要合法:变量名必须是由字母、数字或下划线组成。例如:a,a1,a_1。2.开头不能是数字。例如:可以a1,但不能起1a。3....
- Rust编程-核心篇-不安全编程_rust安全性
-
Unsafe的必要性Rust的所有权系统和类型系统为我们提供了强大的安全保障,但在某些情况下,我们需要突破这些限制来:与C代码交互实现底层系统编程优化性能关键代码实现某些编译器无法验证的安全操作Rus...
- 探秘 Python 内存管理:背后的神奇机制
-
在编程的世界里,内存管理就如同幕后的精密操控者,确保程序的高效运行。Python作为一种广泛使用的编程语言,其内存管理机制既巧妙又复杂,为开发者们提供了便利的同时,也展现了强大的底层控制能力。一、P...
- 一周热门
- 最近发表
- 标签列表
-
- HTML 教程 (33)
- HTML 简介 (35)
- HTML 实例/测验 (32)
- HTML 测验 (32)
- JavaScript 和 HTML DOM 参考手册 (32)
- HTML 拓展阅读 (30)
- HTML文本框样式 (31)
- HTML滚动条样式 (34)
- HTML5 浏览器支持 (33)
- HTML5 新元素 (33)
- HTML5 WebSocket (30)
- HTML5 代码规范 (32)
- HTML5 标签 (717)
- HTML5 标签 (已废弃) (75)
- HTML5电子书 (32)
- HTML5开发工具 (34)
- HTML5小游戏源码 (34)
- HTML5模板下载 (30)
- HTTP 状态消息 (33)
- HTTP 方法:GET 对比 POST (33)
- 键盘快捷键 (35)
- 标签 (226)
- opacity 属性 (32)
- transition 属性 (33)
- 1-1. 变量声明 (31)
