为什么python pandas不提供Linux whl文件

时间:2016-05-25 03:28:29

标签: python pandas pip pypi

我想知道为什么python pandas不为Linux上的pip安装提供.whl文件。但是,Whl文件可用于Mac和Windows。请参阅:https://pypi.python.org/pypi/pandas/0.18.1

我能做到

pip install pandas

但这涉及从源头构建的耗时过程。我有一个包含pandas作为构建依赖关系的持续集成系统,所以我希望从二进制.whl文件中快速安装,而无需从源代码构建。

1 个答案:

答案 0 :(得分:5)

Armin Ronacher在某种程度上对此进行了讨论。从根本上说,Linux发行版不够统一,你不能依赖于特定库的存在来链接;甚至python库也可能不一致。

您可以为您正在使用的环境构建自己的轮子并根据需要多次安装,这对于持续集成系统应该可以正常工作:

$ pip wheel pandas
Collecting pandas
  Downloading pandas-0.18.1.tar.gz (7.3MB)
    100% |████████████████████████████████| 7.3MB 131kB/s 
...
Successfully built pandas

$ ls pandas*
pandas-0.18.1-cp35-cp35m-linux_x86_64.whl

$ pip install pandas-0.18.1-cp35-cp35m-linux_x86_64.whl 
Processing ./pandas-0.18.1-cp35-cp35m-linux_x86_64.whl
...
Successfully installed pandas-0.18.1 python-dateutil-2.5.3 pytz-2016.4 six-1.10.0

请注意,numpy确实在pypi上提供了linux wheel文件。在里面看(它们是简单的zip文件)我们可以看到它们捆绑了通常的numpy库,例如lapack_lite加上它们的依赖项(在这种情况下是gfortran和openblas):

$ unzip -l numpy-1.11.0-cp35-cp35m-manylinux1_x86_64.whl  | grep [.]so

...
 38407360  2016-04-12 21:01   numpy/.libs/libopenblasp-r0-39a31c03.2.18.so
  1017104  2016-04-12 21:01   numpy/.libs/libgfortran-ed201abd.so.3.0.0
   108200  2016-04-12 21:01   numpy/linalg/lapack_lite.cpython-35m-x86_64-linux-gnu.so
...

相比之下,O / S安装的numpy将lapack_lite链接到/ usr / lib / libblas,它通过debian替代系统链接到优化的libatlas,因此它应该具有更好的性能(未经测试)。

查看lapack链接,他们使用的是非常标准的库,因此它可以在许多64位Linux系统上运行:

$ ldd lapack_lite.cpython-35m-x86_64-linux-gnu.so 
    linux-vdso.so.1 =>  (0x00007fffadf7a000)
    libopenblasp-r0-39a31c03.2.18.so => /tmp/numpy/linalg/./../.libs/libopenblasp-r0-39a31c03.2.18.so (0x00007f5efb8bc000)
    libpthread.so.0 => /lib/x86_64-linux-gnu/libpthread.so.0 (0x00007f5efb69e000)
    libc.so.6 => /lib/x86_64-linux-gnu/libc.so.6 (0x00007f5efb2d9000)
    libm.so.6 => /lib/x86_64-linux-gnu/libm.so.6 (0x00007f5efafd3000)
    libgfortran-ed201abd.so.3.0.0 => /tmp/numpy/linalg/./../.libs/libgfortran-ed201abd.so.3.0.0 (0x00007f5efacda000)
    /lib64/ld-linux-x86-64.so.2 (0x00007f5efe0d4000)

据推测,有人可以自愿为熊猫创造轮子,并让它们在不同版本的python中保持最新。请注意,pandas .so文件链接到libpython,但不管怎样,numpy避免这样做,尽管进行了python调用。

编辑2016-05-25:添加了构建和安装轮子的说明。