python源码研究之整型对象探索


1.python的整型对象是PyIntObject对象,这个对象是一个不可变对象,即没有ob_size这个变量,这个对象在c层面实现,只是在基本的pyobject中添加了long ob_ival对象,结构体大概是这样的:

typedef struct{

PyObject_HEAD;

long ib_ival

} PyIntObject;

而这个对象对应的类型变量就比较复杂了,很长:

这里面就是int这个类型的一下名称啊,内存大小,以及操作的信息,操作信息是最多的包括:析构函数,比较操作,获取HASH值,打印,都在这里了。

2.说到python里面的整型是定长对象,那么是不是很好奇定长是多少呢,经过研究发现是24个字节,那么为什么是24个字节呢,看上面的结构体,int型4个字节,long型8个字节,指针4个字节,加起来4+4+8=16个字节,这里我开始也是不明白,后来突然想到噢,c语言的结构体有内存对其,所以内存直接就是3*8=24个字节,不行可以试试,申请的整型都是24个字节。

3.下面说说整型的创建,Python是调用c api创建的整型,Python的整型分为小整数和大整数,那么这个小大是怎么区分的,是根据编译源码python时NSMALLPOSINTS区分的,正常的默认编译是[-5,256]是小整数,其他的为大整数,之所以这么分是因为小整数频繁被使用,如果每一个都调用c语言的malloc分配内存,使用完再释放效率很低,所以python使用的内存缓冲池,初始化的时候,python就已经把小整数的内存申请好了,所以小整数的内存地址是不变的。而大整数不是,是动态的,使用的时候申请,所以就有了一个奇怪的东西(这个东西探寻良久,现在醍醐灌顶):

你初始化一个变量在[-5,257]范围内时id(这个变量),内存地址都一样,而初始化[-5,257]以外的数值时,每一次都是变化的,见下图:

(不会缩小图~~)上面就是这个意思了 两个变量都为2 地址一样,两个变量都是-10地址不一样

4.小整数对象就是初始化的都准备好了,在内存申请好了,就像一块死的东西,你需要的时候直接一个引用指过去就行了,引用加1,地址都是一样的,不会新申请,所以很快。

5.大整数不一样了,大整数是存储在一个PyIntBlock中的,PyIntBlock是一个结构体,如下图

这个结构体的大小是1000字节,一个整数是12个字(32位的机器)节所以 1000/12 = 82个整型,也就是一个PyIntBlock可以有82个整型。

继续说,PyIntBlock中的block_list是已经使用了多少内存,已经分配了的内存指针,free_list是没有分配的剩余的内存指针,开始时这俩都是NULL,因为是一个新的PyIntBlock,注意这里block是每一个PyIntBlock的使用内存的情况,而free_list是所有的剩余内存情况,补一句,这些存储单元都是单项链表。

6.所以综上就可以知道,当free_list为NULL的时候,就需要新建PyIntBlock,此时调用fill_free_list方法,把空闲的快用单向链表链接起来给free_list,新建一个int对象时,在free_list拿一块初始化数值,加入Block_list就行了。

7.这里有个坑,当A,B两个PyIntBlock,A已经全部使用,B使用一半,A某一个元素释放了的时候,实际是没有释放,二十加入了Free_List,这里导致的就是新申请的int类型永远不会释放掉,而是给free_list了,(这里我也不明白。。这不就是内存泄露了,。。。思考中)

8.ok就写介个多吧,下次继续。​

1.python的整型对象是PyIntObject对象,这个对象是一个不可变对象,即没有ob_size这个变量,这个对象在c层面实现,只是在基本的pyobject中添加了long ob_ival对象,结构体大概是这样的:

typedef struct{

PyObject_HEAD;

long ib_ival

} PyIntObject;

而这个对象对应的类型变量就比较复杂了,很长:

这里面就是int这个类型的一下名称啊,内存大小,以及操作的信息,操作信息是最多的包括:析构函数,比较操作,获取HASH值,打印,都在这里了。

2.说到python里面的整型是定长对象,那么是不是很好奇定长是多少呢,经过研究发现是24个字节,那么为什么是24个字节呢,看上面的结构体,int型4个字节,long型8个字节,指针4个字节,加起来4+4+8=16个字节,这里我开始也是不明白,后来突然想到噢,c语言的结构体有内存对其,所以内存直接就是3*8=24个字节,不行可以试试,申请的整型都是24个字节。

3.下面说说整型的创建,Python是调用c api创建的整型,Python的整型分为小整数和大整数,那么这个小大是怎么区分的,是根据编译源码python时NSMALLPOSINTS区分的,正常的默认编译是[-5,256]是小整数,其他的为大整数,之所以这么分是因为小整数频繁被使用,如果每一个都调用c语言的malloc分配内存,使用完再释放效率很低,所以python使用的内存缓冲池,初始化的时候,python就已经把小整数的内存申请好了,所以小整数的内存地址是不变的。而大整数不是,是动态的,使用的时候申请,所以就有了一个奇怪的东西(这个东西探寻良久,现在醍醐灌顶):

你初始化一个变量在[-5,257]范围内时id(这个变量),内存地址都一样,而初始化[-5,257]以外的数值时,每一次都是变化的,见下图:

(不会缩小图~~)上面就是这个意思了 两个变量都为2 地址一样,两个变量都是-10地址不一样

4.小整数对象就是初始化的都准备好了,在内存申请好了,就像一块死的东西,你需要的时候直接一个引用指过去就行了,引用加1,地址都是一样的,不会新申请,所以很快。

5.大整数不一样了,大整数是存储在一个PyIntBlock中的,PyIntBlock是一个结构体,如下图

这个结构体的大小是1000字节,一个整数是12个字(32位的机器)节所以 1000/12 = 82个整型,也就是一个PyIntBlock可以有82个整型。

继续说,PyIntBlock中的block_list是已经使用了多少内存,已经分配了的内存指针,free_list是没有分配的剩余的内存指针,开始时这俩都是NULL,因为是一个新的PyIntBlock,注意这里block是每一个PyIntBlock的使用内存的情况,而free_list是所有的剩余内存情况,补一句,这些存储单元都是单项链表。

6.所以综上就可以知道,当free_list为NULL的时候,就需要新建PyIntBlock,此时调用fill_free_list方法,把空闲的快用单向链表链接起来给free_list,新建一个int对象时,在free_list拿一块初始化数值,加入Block_list就行了。

7.这里有个坑,当A,B两个PyIntBlock,A已经全部使用,B使用一半,A某一个元素释放了的时候,实际是没有释放,二十加入了Free_List,这里导致的就是新申请的int类型永远不会释放掉,而是给free_list了,(这里我也不明白。。这不就是内存泄露了,。。。思考中)

8.ok就写介个多吧,下次继续。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,013评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,205评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,370评论 0 342
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,168评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,153评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,954评论 1 283
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,271评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,916评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,382评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,877评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,989评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,624评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,209评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,199评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,418评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,401评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,700评论 2 345

推荐阅读更多精彩内容

  • http://python.jobbole.com/85231/ 关于专业技能写完项目接着写写一名3年工作经验的J...
    燕京博士阅读 7,547评论 1 118
  • 文/Bruce.Liu1 1.Python前世今生 1.1.Python历史 Python的创始人: Guido ...
    BruceLiu1阅读 11,777评论 3 120
  • 本节内容 Python介绍 发展史 Python 2 or 3? 安装 Hello World程序 变量 用户输入...
    小小不懂11阅读 3,406评论 2 30
  • 人类每许下一个愿望, 天上就会掉落一颗星。 好怕自己仰望时, 天空已经变得安静。 每一个生命降生, 天上就会点亮一...
    百字生阅读 318评论 1 12