Matplotlib提速(翻译)

原文: https://bastibe.de/2013-05-30-speeding-up-matplotlib.html

2013年5月30日

郑重声明,Matplotlib棒极了!它的输出看起来令人惊奇,它的可配置性很高,并且使用起来非常简单。得工具如此,夫复何求?

好吧…速度。如果我可以对Matplotlib的一点进行批评的话,那就是它是相对缓慢的。为了测量这种缓慢,我们来做一个非常简单的线性图表,然后尽可能快地在上面画一些随机数。

import matplotlib.pyplot as plt
import numpy as np
import time

fig, ax = plt.subplots()

tstart = time.time()
num_plots = 0
while time.time()-tstart < 1:
    ax.clear()
    ax.plot(np.random.randn(100))
    plt.pause(0.001)
    num_plots += 1
print(num_plots)

在我的机子上,我每秒大概可以绘制11个图表。在这里我用 pause() 来更新图表以避免阻塞。正确的做法其实是用 draw() 函数来替代更新。 但是由于 Qt4Agg后端的一个bug,你不能在这儿使用它。如果你没在用Qt4Agg后端,draw()可能是正确的选择。

对于单张图表,十个图表每秒并不糟糕。但是,这是最简单的情况,所以在这种最简情况下10帧每秒可能对于一些复杂的情况来说就是一件坏事了。

在这个过程中大量耗时的一件事是不断地重复创建所有的轴线和文字标签。所以我们尝试一下不这样做。

除了在每一帧接连调用clear()plot(),从而有效地删除图表的所有内容并重建,我们可以保留一个已经存在的图表而只是改动它的数据部分:

fig, ax = plt.subplots()
line, = ax.plot(np.random.randn(100))

tstart = time.time()
num_plots = 0
while time.time()-tstart < 1:
    line.set_ydata(np.random.randn(100))
    plt.pause(0.001)
    num_plots += 1
print(num_plots)

这样可以每秒生成26张图表。对于这样一个简单的改动来说已经不错了。缺点是数轴不会再跟随数据改变而自动缩放了。因此,它们不会再基于数据变动而改变它们的限制了。

对其进行分析产生了一些有趣的结果:

ncalls tottime percall cumtime percall filename:lineno(function)
15 0.167 0.011 0.167 0.011 {built-in method sleep)

在所有事情中用了用了最大块运行时的函数是sleep()。显然这不是我们想要的。深入探究分析器可以看出这实际上发生在pause()的调用过程中。于是我再一次思考使用pause是否是对性能有益的好想法。

正如结果所示,pause()在内部调用了fig.canvas.draw()plt.show(),然后调用了fig.canvas.start_event_loop()fig.canvas.start_event_loop()的默认实现进而调用了fig.canvas.flush_events(),然后休眠了所请求的时间。雪上加霜的是,它甚至坚持睡眠至少百分之一秒,这很好地解释了分析器输出中15次call中的0.167秒的sleep()时间。

将这些方法放在一块得到了

fig, ax = plt.subplots()
line, = ax.plot(np.random.randn(100))

tstart = time.time()
num_plots = 0
while time.time()-tstart < 1:
    line.set_ydata(np.random.randn(100))
    fig.canvas.draw()
    fig.canvas.flush_events()
    num_plots += 1
print(num_plots)

到现在可以每秒绘制40帧图表了。需要注意之前提到的show()的调用因为图表已经在屏幕上了而可以被忽略。flush_events()只是在跑Qt的事件循环,所以这里应该没有什么可以优化的。

现在唯一可以优化的东西只剩下了fig.canvas.show()。这个函数实际上是把ax包括的所有元素绘制出来。这些元素可以通过ax.get_children()获得。对于这样一个简单的图表,有这些元素:

  • the background ax.patch
  • the line,由plot()功能返回的
  • the spines ax.spines
  • the axes ax.xaxis and ax.yaxis

我们可以在这里做的是部分绘制实际变化了的图表部分。这部分至少是背景和线条。只重绘这部分内容的代码如下:

fig, ax = plt.subplots()
line, = ax.plot(np.random.randn(100))
plt.show(block=False)

tstart = time.time()
num_plots = 0
while time.time()-tstart < 5:
    line.set_ydata(np.random.randn(100))
    ax.draw_artist(ax.patch)
    ax.draw_artist(line)
    fig.canvas.update()
    fig.canvas.flush_events()
    num_plots += 1
print(num_plots/5)

需要注意的是你必须添加fig.canvas.update()来复制新渲染的线条到绘图后端。

现在每秒可以绘制500帧图表了。五百次每秒!坦率地说,这真是太不可以思议了!

注意到自从我们只重绘背景和线条开始,一些数轴的细节可能会被覆盖。为了把spines也画上,使用spines里的ax.spines.values()ax.draw_artist(ax.yaxis)。如果你将它们都绘制出来,你可以得到近似fig.canvas.draw()的性能。尤其是数轴的绘制十分消耗性能。

还有一种方法,就是绘制一次完整的图表然后把完整的空背景复制出来,然后复原它并切只在它的顶层绘制一条新的线。这和上面的代码一样快并且没有任何图像失真,但是如果你改变图表的大小就会失效。

总得来说,Matplotlib的灵活性给我留下了深刻的印象。默认情况下,Matplotlib比起性能更注重质量。但是因为它非常灵活可控,如果你在某些地方确实需要高性能,它可以让你随心所欲地调整它。真的是一项惊人的技术啊!

EDIT: 如结果所示,fig.canvas.blit(ax.bbox)因为疯狂地泄漏内存而成为了一个坏主意。你应该用fig.canvas.update()代替它,从而拥有相同的高速度但是没有内存泄漏。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,214评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,307评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,543评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,221评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,224评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,007评论 1 284
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,313评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,956评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,441评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,925评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,018评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,685评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,234评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,240评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,464评论 1 261
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,467评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,762评论 2 345

推荐阅读更多精彩内容