Pyston v2.0 发布,速度比 Python 快 20%!

首先,请允许我隆重地宣布 Pyston v2 发布。Pyston v2 是 Python 编程语言的一种更快且高度兼容的实现。在我们的宏基准测试中,Pyston v2 比原版的 Python 3.8快20%。更重要的是,在你的代码上,它可以更快。Pyston v2 可以降低服务器成本,减少用户延迟,并提高开发人员的生产力。

Pystonv2 的部署非常简单,因此如果你希望获得更好的 Python 性能,那么我们建议你花五分钟时间尝试一下 Pyston。使用 Pyston v2 是最简单的加快项目速度的方法之一。

性能

Pystonv2 在许多工作负载上均提供了显著的速度提升,同时鲜有弊端。我们的工作重点一直放在 Web 服务工作负载上,但是 Pyston v2 在其他工作负载和流行的基准测试上也实现了更高的速度。

我们的团队整理了一份全新的公共 Python 宏基准测试套件,该套件可测量多个常用 Python 项目的性能。该套件中的基准规模超过了其他 Python 套件,因此可以更真实地代表实际的应用程序。尽管这导致我们的项目不如其他项目那样受人关注,但我们相信这个测试套件展示了 Pyston v2 在面对实际用例时可以更好地提升速度。Pyston v2 在宏基准测试上展示了性能的提升,在 chaos.py 和 nbody.py 等的测试中,其速度是标准 Python 的两倍。

下面是我们的性能测试结果:


                                            CPython 3.8.5                  Pyston 2.0               PyPy 7.3.2

Flaskblogging 预热时间         [1]n/a                                     n/a                             85s

flaskblogging 平均延迟               5.1ms                                4.1ms                    2 .5ms

flaskblogging p99 延迟               6.3ms                                5.2ms                     5.8ms

flaskblogging 内存使用                  47MB                             54MB                      228MB

djangocms 预热时间                    [1]n/a                                  n/a                         105s

djangocms 平均延迟                     14.1ms                             11.8ms                   15.9ms

djangocms p99 延迟                      15.0ms                              12.8ms                  179ms

djangocms 内存使用                      84MB                                 91MB                    279MB

Pylint 加速                                       1x                                     1.16x                           0.50x

mypy 加速                                         1x                                        1.07x                     [2]不支持

PyTorch 加速                                     1x                                      1.00x                         [2]不支持

PyPy 基准测试套件                           [3]1x                                    1.36x                         2.48x

上述结果是在运行了 Ubuntu 20.04 的 m5.large EC2 实例上收集的。

预热时间的定义为基准达到峰值性能的95%之前的时间。如果无法与噪声区分开,则用“n/a”表示。我们的延迟测试仅考虑预热后的行为。

mypy 和 PyTorch 不支持利用源代码自动构建 C 扩展名,因此这些 Pyston 的测试结果使用了不安全的兼容模式。

我们对 PyPy 基准套件进行了修改,使其仅运行与 Python 3.8兼容的基准。

结果分析

在我们的目标基准测试(djangocms + flaskblogging)中,Pyston v2 的平均延迟平均提高了1.22倍,p99 延迟平均提高了1.18倍,同时每个进程仅使用了几兆字节。我们尚未优化其他基准。

p99 延迟指的是响应时间分布的第99个百分位,是 Web 服务中的常用指标,它可以表示用户体验到的平均延迟。PyPy 在 djangocms 上的高p99延迟来自周期性的延迟峰值,大概是由于垃圾收集暂停导致的。CPython 和 Pyston 都表现出周期性的峰值,大概是由于它们的周期收集器引起的,但是它们的频率较低且幅度较小。

mypy 和 PyTorch 基准显示了 Pyston v2 的自然边界。这些基准测试都大部分都是在 C 扩展中完成的,这些扩展不受我们的 Python 加速影响。我们支持 C API,而且没有模拟层,因此我们可以进一步少量提升 mypy 性能,并且不会降低 pytorch 或 numpy 的性能。具体的收益取决于 Python 和 C 扩展的混合程度。

技术方法

我们在 Pyston v2 中使用的技术包括:

使用 DynASM 开销非常低的JIT

Quickening

常规的 CPython 优化

建立改进流程

兼容性

由于 Pyston 是 CPython 的分支,因此我们认为它是兼容性最高的 Python 实现之一。它支持 CPython 所有的功能以及 C API。

尽管从理论上来说 Pyston 的功能相同,但实际上,任何新的 Python 实现都存在或多或少的兼容性难题。

可用性

Pystonv 2.0可作为预编译包立即使用。当前,我们提供适用于 Ubuntu 18.04 和 20.04 x86_64 的软件包。

Pyston 的试用只需安装软件包即可,用 pyston3 替换 python3,然后用 pip-pyston3install 重新安装依赖项。如果你有现成的自动构建,则只需修改几行代码。

背景

我们在 Dropbox 设计了 Pyston v1,目的是加快其 Python 的 Web 服务工作量。项目结束后,我们团队中的一些人集思广益,集中讨论了如何采用不同的方式构建 Pyston。Pyston v2 的灵感来自 Pyston v1,但技术却与v1没有关系。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,271评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,275评论 2 380
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,151评论 0 336
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,550评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,553评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,559评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,924评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,580评论 0 257
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,826评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,578评论 2 320
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,661评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,363评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,940评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,926评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,156评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,872评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,391评论 2 342