迭代器应用——itertools

itertools提供的各类迭代器扩展

1. 引用

import itertools
或者
from itertools import *

2. 迭代器

迭代器 实参 结果 示例
repeat() elem [, n] elem, elem, elem, ... 重复无限次或n次 repeat(10, 3) --> 10 10 10
chain p, q, ... p0, p1, ... plast, q0, q1, ... chain('ABC', 'DEF') --> A B C D E F
chain.from_iterable() iterable p0, p1, ... plast, q0, q1, ... chain.from_iterable(['ABC', 'DEF']) --> A B C D E F
compress() data, selectors (d[0] if s[0]), (d[1] if s[1]), ... compress('ABCDEF', [1,0,1,0,1,1]) --> A C E F
groupby() iterable[, key] 根据key(v)值分组的迭代器
filter pred, seq seqpred(x)为真值的元素,xseq中的元素。 filter(lambda x: x%2, range(10)) --> 1 3 5 7 9
filterfalse pred, seq seqpred(x)为假值的元素,xseq中的元素。 filterfalse(lambda x: x%2, range(10)) --> 0 2 4 6 8
islice seq, [start,] stop [, step] seq[start:stop:step]中的元素 islice('ABCDEFG', 2, None) --> C D E F G
permutations() p[, r] 长度r元组,所有可能的排列,无重复元素 permutations('ABCD', 2)
combinations() p, r 长度r元组,有序,无重复元素 combinations('ABCD', 2)
combinations_with_replacement() p, r 长度r元组,有序,元素可重复 combinations_with_replacement('ABCD', 2)

3. 具体说明

I. itertools.repeat(object[, times])

    创建一个迭代器,重复生成object,times(如果已提供)指定重复计数,如果未提供times,将无止尽返回该对象。

from itertools import *

for i in repeat('test', 5):
    print(i)

-----------------------------
test
test
test
test
test

II. itertools.chain(*iterables)

    将多个迭代器作为参数, 但只返回单个迭代器, 返回他们中的每个单一元素

from itertools import *

for i in chain([1, 2, 3], ['a', 'b', 'c']):
    print i
----------------------------------
1
2
3
a
b
c

III. chain.from_iterable(*iterables)

    构建类似 chain() 迭代器的另一个选择。不同的是这里可以以整体形式传入参数(列表或其他可迭代对象)

print([data for data in chain.from_iterable(['ABC', 'DEF'])])
------------------------
['A', 'B', 'C', 'D', 'E', 'F']

IV. itertools.compress(data, selectors)

    提供一个选择列表,对原始数据进行筛选,根据后面的0或者1判断TrueFalse

print([data for data in compress('ABCDEF', [1, 0, 1, 0, 1, 1])])
-------------------------------
['A', 'C', 'E', 'F']

V. itertools.groupby(iterable[, key])

返回一个产生按照key进行分组后的值集合的迭代器.

  • 按照keyfunc函数对序列每个元素执行后的结果分组(每个分组是一个迭代器), 返回这些分组的迭代器

from itertools import groupby
qs = [{'date' : 1},{'date' : 2}]
[(name, list(group)) for name, group in itertools.groupby(qs, lambda p:p['date'])]

Out[77]: [(1, [{'date': 1}]), (2, [{'date': 2}])]


>>> from itertools import *
>>> a = ['aa', 'ab', 'abc', 'bcd', 'abcde']
>>> for i, k in groupby(a, len):
...     print i, list(k)
...
2 ['aa', 'ab']
3 ['abc', 'bcd']
5 ['abcde']

VI. itertools.filter(predicate, iterable)

    返回只包括当测试函数返回true时的项.创建一个迭代器,仅生成iterablepredicate(item)True的项,如果predicateNone,将返回iterable中所有计算为True的项

对函数func执行返回真的元素的迭代器

from itertools import *

    for i in filter(lambda x: x < 1, [-1, 0, 1, 2, 3, 4, 1, -2]):
        print('Yielding:', i)
--------------------------------
Yielding: -1
Yielding: 0
Yielding: -2

VII. itertools.filterfalse(predicate, iterable)

    和ifilter(函数相反 , 返回一个包含那些测试函数返回false的项的迭代器)
,创建一个迭代器,仅生成iterablepredicate(item)False的项,如果predicate为None,则返回iterable中所有计算为False的项 对函数func执行返回假的元素的迭代器

from itertools import *

    for i in filterfalse(lambda x: x < 1, [-1, 0, 1, 2, 3, 4, 1, -2]):
        print('Yielding:', i)
-----------------------------------------
    for i in filterfalse(lambda x: x < 1, [-1, 0, 1, 2, 3, 4, 1, -2]):
        print('Yielding:', i)

VIII. itertools.islice(iterable, start, stop[, step])

    根据索引对迭代器切片,terable[start : stop : step],将跳过前start个项,迭代在stop所指定的位置停止,step指定用于跳过项的步幅。 与切片不同,负值不会用于任何startstopstep, 如果省略了start,迭代将从0开始,如果省略了step,步幅将采用1.

  • 返回序列seq的从start开始到stop结束的步长为step的元素的迭代器
from itertools import *

print 'Stop at 5:'
for i in islice(count(), 5):
    print i

print 'Start at 5, Stop at 10:'
for i in islice(count(), 5, 10):
    print i

print 'By tens to 100:'
for i in islice(count(), 0, 100, 10):
    print i

Stop at 5:
0
1
2
3
4
Start at 5, Stop at 10:
5
6
7
8
9
By tens to 100:
0
10
20
30
40
50
60
70
80
90

IX. itertools.permutations(iterable[, r])

    创建一个迭代器,返回iterable中所有长度为r的项目序列,如果省略了r,那么序列的长度与iterable中的项目数量相同

  • 返回以r为长度的所有随机组合的排列
 print([data for data in permutations('ABCD', 2)])
---------------------------------------------------
[('A', 'B'), ('A', 'C'), ('A', 'D'), ('B', 'A'), ('B', 'C'), ('B', 'D'), ('C', 'A'), ('C', 'B'), ('C', 'D'), ('D', 'A'), ('D', 'B'), ('D', 'C')]

X. itertools.combinations(iterable, r)

    创建一个迭代器,返回iterable中所有长度为r的子序列,返回的子序列中的项按输入iterable中的顺序排序 (不带重复)

print([data for data in combinations('ABCD', 2)])
------------------------------------------------
[('A', 'B'), ('A', 'C'), ('A', 'D'), ('B', 'C'), ('B', 'D'), ('C', 'D')]

XI. itertools.combinations_with_replacement(iterable, r)

    创建一个迭代器,返回iterable中所有长度为r的子序列,返回的子序列中的项按输入iterable中的顺序排序 (带重复)

print([data for data in combinations_with_replacement('ABCD', 2)])
---------------------------------------------
[('A', 'A'), ('A', 'B'), ('A', 'C'), ('A', 'D'), ('B', 'B'), ('B', 'C'), ('B', 'D'), ('C', 'C'), ('C', 'D'), ('D', 'D')]

  • itertools中实现了很多有用的迭代器,像这里所展示的都是比较实用的,避免自己重新实现复杂的代码
  • 更多内容参考文档
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,013评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,205评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,370评论 0 342
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,168评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,153评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,954评论 1 283
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,271评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,916评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,382评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,877评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,989评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,624评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,209评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,199评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,418评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,401评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,700评论 2 345

推荐阅读更多精彩内容

  • PYTHON-进阶-ITERTOOLS模块小结转自wklken:http://wklken.me/posts/20...
    C_Y_阅读 953评论 0 2
  • ITERTOOLS是一个高效循环的迭代函数集合。正好在最近的应用的时候用的比较多,网上几个比较详细的介绍帖子要么写...
    kivinsae阅读 2,995评论 1 10
  • 图片汇总: ITERTOOLS是一个高效循环的迭代函数集合。正好在最近的应用的时候用的比较多,网上几个比较详细的介...
    _Cappuccino_阅读 12,648评论 0 1
  • 1 itertools函数 以下模块级别函数都构造并返回iterator。有些iterator是无限长度的流,因此...
    lakerszhy阅读 1,032评论 0 3
  • 梭罗的极简主义:一个人只要充满自信地朝着他梦想指引的方向前进,努力去过他心中想象的那种生活,那他就会获得在平时意想...
    Winola_e98a阅读 682评论 0 2