python之MRO和垃圾回收机制
一、MOR
1、C3算法简介
为了解决原来基于深度优先搜索算法不满足本地优先级,和单调性的问题。
python2.3版本之后不管是新式类还是经典类,查找继承顺序都采用C3算法
2、算法原理
C3算法的本质就是Merge, 不断地把mro()函数返回的队列进行Merge,规则如下:
(0)
首先把要查找的类的所有父类的mro找出来,再把所有父类的mro和所有父类进行归并算法 (1)
如果第一个序列的第一个元素,是后续序列的第一个元素,或者在后续序列中没有再次出现,则将这个元素合并到最终的方法解析顺序序列中,
并从当前操作的全部序列中删除。 (2)
如果不符合,则跳过此元素,查找下一个列表的第一个元素,重复1的判断规则。
3、示例
class A(object): pass
class B(A): pass
class C(A): pass
class D(B): pass
class E(C): pass
class F(D,E): pass # F的mro顺序:
# 第一步 找出F所有的父类的MRO
# D [DBAO]
# E [ECAO]
# 第二步 把所有父类的MRO 以及 所有的父类做归并算法
# [DBAO] [ECAO] [DE]
# F + merge([DBAO] [ECAO] [DE])
# 取第一个序列的第一个元素D,它是后续序列[DE]的第一个元素,那么D是最终序列的第一个元素
# 把D从全部序列中删除
# FD + merge([BAO] [ECAO] [E])
# B在后续序列中没有再次出现,那么B是最终序列的第二个元素
# 把B从全部序列中删除
# FDB + merge([AO] [ECAO] [E])
# A在后续序列中出现了,跳过A,查找下一个列表的第一个元素E,E是后续序列的第一个元素,取E
# FDBE + merge([AO] [CAO])
# FDBEC + merge([AO] [AO])
# FDBECAO
print(F.__mro__)
二、垃圾回收机制
1、引用计数机制
python中的垃圾回收机制是:引用计数主、标记清除和分代回收为辅
python里每一个东西都是对象,它们的核心就是一个结构体:PyObject
Python对象和引用是分离的 PyObject是每个对象必有的内容,其中ob_refcnt就是做为引用计数。当一个对象有新的引用时,它的ob_refcnt就会增加,当引用它的对象被删除,
它的ob_refcnt就会减少。 当引用计数为0时,该对象生命就结束了,就会被清除了。 查看某个变量的引用计数
from sys import getrefcount
print(getrefcount(变量)) 引用计数机制的优点:
1. 简单
2. 实时性
一旦没有引用,内存就直接释放了。不用像其他机制等到特定时机。实时性还带来一个好处:处理回收内存的时间分摊到了平时。 引用计数机制的缺点:
1. 维护引用计数消耗资源
2. 循环引用的时候,这个对象的引用计数永远不会为0,这个对象就会一直存在
d = [1,2,3]
f = [4,5,6]
d.append(f)
f.append(d)
2、标记清除
标记清除(Mark—Sweep)算法是一种基于追踪回收(tracing GC)技术实现的垃圾回收算法。
它分为两个阶段:
第一阶段是标记阶段,GC会把所有的活动对象打上标记。
第二阶段是把那些没有标记的非活动对象进行回收。 如何判断哪些是活动对象哪些是非活动对象:
对象之间通过引用(指针)连在一起,构成一个有向图,对象构成这个有向图的节点,而引用关系构成这个有向图的边。从根对象(root object)出发,
沿着有向边遍历对象,可达的(reachable)对象标记为活动对象,不可达的对象就是要被清除的非活动对象。根对象就是全局变量、调用栈、寄存器。 示例图:
在上图中,我们把小圈当做全局变量,也就是把它作为root object,
从小圈出发,对象1可直达,那么它将被标记,对象2、3、6可间接到达也会被标记,
而4和5不可达,那么1、2、3、6就是活动对象,4和5是非活动对象会被GC回收。 标记清除算法作为Python的辅助垃圾收集技术主要处理的是一些容器对象,
比如list、dict、tuple,instance等,因为对于字符串、数值对象是不可能造成循环引用问题。
Python使用一个双向链表将这些容器对象组织起来。 不过,这种简单粗暴的标记清除算法也有明显的缺点:清除非活动的对象前它必须顺序扫描整个堆内存,哪怕只剩下小部分活动对象也要扫描所有对象。
3、分代回收
1. 理论解释
分代回收是一种以空间换时间的操作方式,Python将内存根据对象的存活时间划分为不同的集合,每个集合称为一个代,Python将内存分为了3“代”,分别
为年轻代(第0代)、中年代(第1代)、老年代(第2代),他们对应的是3个链表,它们的垃圾收集频率与对象的存活时间的增大而减小。新创建的对象都会
分配在年轻代,年轻代链表的总数达到上限时,Python垃圾收集机制就会被触发,把那些可以被回收的对象回收掉,而那些不会回收的对象就会被移到中年
代去,依此类推,老年代中的对象是存活时间最久的对象,甚至是存活于整个系统的生命周期内。同时,分代回收是建立在标记清除技术基础之上。分代回收
同样作为Python的辅助垃圾收集技术处理那些容器对象。 2. 简单来说
python内存中存放了三代数据,每一代都是链表
0代 年轻的一代
域值(700, 10, 10)
当0代链表达到域值上限后,触发0带的回收
0代被触发回收之后没有被回收的对象放入1代
0代被回收10次的时候触发1代回收
1代没有被回收对象放入2代
1代触发10次的时候触发2代回收
4、总结
当某个条件达到后,触发了垃圾回收机制,首先在0代中先做引用计数,把引用为0的对象清除,然后再做标记清除,把没用的循环引用对象也清除,
再把没有清除的对象放到1代,当触发了10次0代回收机制后,会触发1代的垃圾回收,然后先做引用计数,再做标记清除,触发10次1代垃圾回收后,
会触发2代垃圾回收...
python之MRO和垃圾回收机制的更多相关文章
- python 全局变量与局部变量 垃圾回收机制
掌握L.E.G.B(作用域) 掌握局部作用域修改全局变量 步骤- 1.命名空间和作用域 命名空间:变量名称与值的映射关系作用域:变量作用的区域,即范围. 注意:class/def/模块会产生作用域:分 ...
- Python垃圾回收机制--完美讲解!
转自: http://www.jianshu.com/p/1e375fb40506 先来个概述,第二部分的画述才是厉害的. Garbage collection(GC) 现在的高级语言如java,c# ...
- python垃圾回收机制(Garbage collection)
由于面试中遇到了垃圾回收的问题,转载学习和总结这个问题. 在C/C++中采用用户自己管理维护内存的方式.自己管理内存极其自由,可以任意申请内存,但也为大量内存泄露.悬空指针等bug埋下隐患. 因此在现 ...
- python高级:垃圾回收机制
---恢复内容开始--- 垃圾回收机制 1.计数引用机制 就是一个变量.数据结构.对象当没有人引用时,python的会启用垃圾回收机制,将其从内存中删除. 怎么看引用的次数呢?sys模块提供的sys. ...
- 浅析Python垃圾回收机制!
Python垃圾回收机制 目录 Python垃圾回收机制 1. 内存泄露 2. Python什么时候启动垃圾回收机制? 2.1 计数引用 2.2 循环引用 问题:引用计数是0是启动垃圾回收的充要条件吗 ...
- 简述Python垃圾回收机制和常量池的验证
目录 通过代码验证python解释器内部使用了常量池 Python的引入 变量的引入 为什么要有变量 定义变量 常量引入 常量池引入 Python解释器 Python变量存储机制 Python垃圾回收 ...
- python里面的垃圾回收机制
文章链接:https://www.jianshu.com/p/1e375fb40506 Garbage collection(GC) 现在的高级语言如java,c#等,都采用了垃圾收集机制,而不再是c ...
- Python的 垃圾回收机制
垃圾回收 1. 小整数对象池 整数在程序中的使用非常广泛,Python为了优化速度,使用了小整数对象池, 避免为整数频繁申请和销毁内存空间. Python 对小整数的定义是 [-5, 257) 这些整 ...
- Python的垃圾回收机制
Python的GC模块主要运用了“引用计数”(reference counting)来跟踪和回收垃圾.在引用计数的基础上,还可以通过“标记-清除”(mark and sweep)解决容器对象可能产生的 ...
随机推荐
- ListView展示不同布局需要注意的地方
尊重劳动成果,转载请标明出处:http://www.cnblogs.com/tangZH/p/8419010.html 我们在项目中经常需在一个listview中展示不一样的布局,我们可以在adapt ...
- matlab练习程序(水波特效)
还记得原来写过一个对图像进行波纹扭曲操作的博文. 这次实现的是水波特效,其实就是通过正余弦函数表示波纹中心位置慢慢向外扩散,通过叠加衰减因子使振幅不断减小,进而产生水波的效果. 效果如下: 原图: 波 ...
- PJSUA2开发文档--第十一章 网络问题
11 网络问题 11.1 IP地址更改 请参阅wiki 处理IP地址更改.请注意,本指南使用PJSUA API作为参考. 11.2 被阻止/过滤的网络 请参阅维基百科 通过阻止或过滤的VoIP网络
- C 存储类
存储类定义 C 程序中变量/函数的范围(可见性)和生命周期.这些说明符放置在它们所修饰的类型之前.下面列出 C 程序中可用的存储类: auto.register.static.extern auto ...
- 有两个表A和B,均有key和value两个字段,如果B的key在A中也有,就把B的value替换为A中对应的value
update B b set b.value=(select max(a.value) from A a where b.key=a.key) from A c where b.key=c.key) ...
- ueditor富文本编辑器使用百度地图自定义动态地图组件及兼容https及http协议
ueditor富文本编辑器默认支持百度地图组件,但是如果导入动态地图后会加很多默认的地图组件在上面.如果需要自定义动态地图的组件则需要修改ueditor特定的html. ueditor百度地图组件所在 ...
- pymsql模块
老师的博客地址:http://www.cnblogs.com/wupeiqi/articles/5713330.html 通过pymysql 模块可以通过朋友去操作mysql 数据库,首先的在pip上 ...
- 多线程中的event,用于多线程的协调
''' 简单的需求:红绿灯,红灯停,绿灯行 一个线程扮演红绿灯,每过一段时间灯变化,3-5个线程扮演车,红灯停,绿灯行 红绿灯线程和车的线程会相互依赖 这种场景怎么实现?---事件 切换一次灯就是一次 ...
- vs 2015安装包
Visual Studio 2015 下载含(更新3)及密钥 Visual Studio 2015 是一个丰富的集成开发环境,可用于创建出色的 Windows.Android 和 iOS 应用程序以及 ...
- Linux systemtap定位系统IO资源使用情况(ok)
一.systemtap介绍 SystemTap是一个强大的调试工具,是监控和跟踪运行中的Linux 内核的操作的动态方法,确切的说应该是一门调试语言,因为它有自己的语法,也有解析.编译.运行等过程(准 ...
在上图中,我们把小圈当做全局变量,也就是把它作为root object,