为什么python在Windows上这么慢?

时间:2012-04-14 04:01:30

标签: python benchmarking

我今天学到了关于pystones的知识,所以我决定看看我的各种环境是什么样的。我在笔记本电脑上运行了pystones,它在裸机上运行窗口并得到了这些结果

Python 2.7.2 (default, Jun 12 2011, 15:08:59) [MSC v.1500 32 bit (Intel)] on win32
Type "help", "copyright", "credits" or "license" for more information.
>>> from test import pystone
>>> for i in range(0,10):
...   pystone.pystones()
...
(1.636334799754252, 30556.094026423627)
(2.1157907919853756, 23631.82607155689)
(2.5324817108003685, 19743.479207278437)
(2.541626695533182, 19672.4405231788)
(2.536022267835051, 19715.915208695682)
(2.540327088340973, 19682.50475676099)
(2.544761766911506, 19648.20465716261)
(2.540296805235016, 19682.739393664764)
(2.533851636391205, 19732.804905346253)
(2.536483186973612, 19712.3325148696)

然后我在我们的一些Linux VM上运行它,性能提高了2.7-3.4倍。所以我在我的笔记本电脑上启动了我的vmware Linux VM并重新进行了同样的测试并得到了这些结果:

Python 2.7.2+ (default, Oct  4 2011, 20:03:08) 
[GCC 4.6.1] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> for i in range(0,10):
...   pystone.pystones()
... 
(1.75, 28571.428571428572)
(1.17, 42735.042735042734)
(1.6600000000000001, 30120.48192771084)
(1.8399999999999999, 27173.913043478264)
(1.8200000000000003, 27472.52747252747)
(1.8099999999999987, 27624.30939226521)
(1.3099999999999987, 38167.938931297744)
(1.7800000000000011, 28089.88764044942)
(1.8200000000000038, 27472.527472527414)
(1.490000000000002, 33557.04697986573)

我不太明白在同一个窗口内运行的linux VM实际上比在windows下同一个裸机上运行的python更快。

在Windows上的python有什么不同,它在裸操作系统上执行速度比在同一个机器上运行Linux的VM内执行速度慢?

  • 更多细节 Windows平台Win7x64 在两个平台上运行32位python 在VMWare中运行Windows平台的32位Linux VM

4 个答案:

答案 0 :(得分:8)

我无法回答你的问题,但请考虑这些可能有所作为的事项清单:

  • 您使用的是不同版本的Python。 “2.7.2+”表示您的Linux Python是从版本控制结帐而不是发布构建的。

  • 它们是用不同的编译器编译的(可以想象不同的优化级别)。

  • 你还没有提到复制这么多。可以想象,如果你没有侥幸,那就是侥幸。

  • 您的虚拟机可能不准确。

  • 您正在链接Python的依赖项的不同实现,特别是libc,正如Ignacio Vazquez-Abrams指出的那样。

  • 我不知道pystone的实际基准测试是什么样的,但很多事情的工作方式不同 - 例如unicode处理或磁盘IO可能是系统相关的因素。

答案 1 :(得分:6)

在Windows 10上有类似的问题 - 这是因为 windows defender

我不得不在Windows defender设置中排除python目录和进程并重新启动计算机。

之前:我不得不等待大约20秒来运行任何python代码 - 现在是毫秒。

答案 2 :(得分:3)

您是否在该Windows机器上运行防病毒软件?这或许可以解释它。我个人喜欢将Python,Cygwin和我的sources目录添加到防病毒排除列表中 - 我想我得到了一个小但却明显的加速。也许这可以解释你的结果。

答案 3 :(得分:0)

对您的初创公司进行基准测试,但只有一些慢速模块可以在Windows上进行初始化。一次微小的黑客攻击每次都会让我在启动时节省一秒钟:

import os
import mimetypes #mimetypes gets imported later in dep chain

if __name__ == "__main__":
   # stub this out, so registry db wont ever be read, not needed
   mimetypes._winreg = None

另一个缓慢的原因是,多个标准库模块在导入时编译和缓存它们的正则表达式。 re.compile看起来就像它在Windows上慢一点