时间python脚本使用IPython魔术

时间:2014-07-28 22:53:32

标签: python profiling ipython ipython-magic

如何使用iPython%time或%% timeit magic命令计时执行Python脚本?例如,我有script.py,我想知道执行需要多长时间。细微差别:script.py需要输入参数。以下似乎不起作用。

%%time script.py input_param1 input_param2

2 个答案:

答案 0 :(得分:34)

解决方案

你可以使用:

%%timeit
%run script.py input_param1 input_param2

请注意脚本将被执行多次(数字是自适应的)。要仅执行一次(并且定时不太准确),请将第一行更改为

%%timeit -n1 -r1

解释

%%开头的所有魔术命令都适用于整个单元格。特别是%%timeit将计时单元格中的所有行。

IPython允许在代码的任何一点使用魔术命令(单%)(即循环,if-then)。这里我们只使用magic命令%run来运行脚本。

另请参阅:官方IPython文档中的Magic functions

答案 1 :(得分:2)

您还可以尝试cProfile,它是大多数用户推荐的标准内置Python分析器。

除了每个函数的总运行时间和每个函数的调用次数外,还给出了总运行时间。

以下是运行脚本时如何使用它的示例。结果将保存到名为' output_stats':

的文件中
import cProfile
import pstats

cProfile.run(open('primes.py', 'rb'), 'output_stats')

p = pstats.Stats('output_stats')

p.sort_stats('cumulative').print_stats(10)
Thu May 14 09:26:09 2015    output_stats
     369 function calls in 0.213 seconds

   Ordered by: cumulative time
   List reduced from 89 to 10 due to restriction <10>
   ncalls  tottime  percall  cumtime  percall filename:lineno(function)
        1    0.000    0.000    0.213    0.213 primes.py:1(<module>)
        1    0.019    0.019    0.213    0.213 primes.py:22(prime)
        2    0.141    0.070    0.181    0.091 primes.py:1(primes)
        3    0.041    0.014    0.041    0.014 {range}
        4    0.000    0.000    0.013    0.003 /usr/local/miniconda/envs/dev/lib/python2.7/site-packages/IPython/kernel/zmq/iostream.py:207(write)
        1    0.000    0.000    0.010    0.010 /usr/local/miniconda/envs/dev/lib/python2.7/site-packages/IPython/kernel/zmq/iostream.py:151(flush)
        1    0.000    0.000    0.010    0.010 /usr/local/miniconda/envs/dev/lib/python2.7/site-packages/IPython/kernel/zmq/session.py:589(send)
        1    0.000    0.000    0.009    0.009 /usr/local/miniconda/envs/dev/lib/python2.7/site-packages/IPython/kernel/zmq/session.py:530(serialize)
        4    0.000    0.000    0.007    0.002 /usr/local/miniconda/envs/dev/lib/python2.7/site-packages/IPython/kernel/zmq/session.py:84(<lambda>)
        4    0.000    0.000    0.007    0.002 /usr/local/miniconda/envs/dev/lib/python2.7/site-packages/zmq/utils/jsonapi.py:31(dumps)

===

名为primes.py的示例脚本文件:

def primes(n): 
    if n == 2:
        return [2]
    elif n < 2:
        return []
    s=range(3, n + 1, 2)
    mroot = n ** 0.5
    half=(n + 1) / 2 - 1
    i = 0
    m = 3
    while m <= mroot:
        if s[i]:
            j = (m * m - 3) / 2
            s[j] = 0
            while j < half:
                s[j] = 0
                j += m
        i = i + 1
        m = 2 * i + 3
    return [2] + [x for x in s if x]

def prime(a, b):
    print(primes(a))
    print(primes(b))

if __name__ == "__main__":
    prime(10, 100)