为什么可变字符串比不可变字符串慢?
编辑:
>>> import UserString
... def test():
... s = UserString.MutableString('Python')
... for i in range(3):
... s[0] = 'a'
...
... if __name__=='__main__':
... from timeit import Timer
... t = Timer("test()", "from __main__ import test")
... print t.timeit()
13.5236170292
>>> import UserString
... def test():
... s = UserString.MutableString('Python')
... s = 'abcd'
... for i in range(3):
... s = 'a' + s[1:]
...
... if __name__=='__main__':
... from timeit import Timer
... t = Timer("test()", "from __main__ import test")
... print t.timeit()
6.24725079536
>>> import UserString
... def test():
... s = UserString.MutableString('Python')
... for i in range(3):
... s = 'a' + s[1:]
...
... if __name__=='__main__':
... from timeit import Timer
... t = Timer("test()", "from __main__ import test")
... print t.timeit()
38.6385951042
我认为很明显为什么我在第二次测试中放入s = UserString.MutableString('Python')。
答案 0 :(得分:23)
在假设的语言中提供可变的和不可变的,或者等价的字符串类型(我不能真正想到一个 - 例如,Python和Java都只有不可变的字符串,以及其他方法通过变异这增加了间接性,因此当然可以减慢一些事情;-),没有任何性能差异的真正原因 - 例如,在C ++中,可以互换地使用std::string
或const std::string
我会期望不会造成任何性能差异(诚然,编译器可能能够通过依靠不变性来更好地使用后者来优化代码,但我不知道任何真实世界的做< / em>执行理论上可能的优化; - )。
拥有不可变的字符串可能并确实允许在Java和Python中进行非常大的优化。例如,如果字符串被散列,则哈希值可以被缓存,并且永远不必重新计算(因为字符串不能更改) - 这在使用散列字符串的Python中尤其重要(对于集合中的查找)和词典)如此奢华甚至“幕后”。新鲜的副本永远不需要“以防万一”,前一个副本在此期间发生了变化 - 只要需要该字符串,就可以系统地分发对单个副本的引用。 Python还大量使用(某些)字符串的“实习”,可能允许进行常数时间比较和许多其他类似的快速操作 - 将其视为一种更多方式,一种更先进的方法,以利用字符串的不变性缓存更多经常在其上执行的操作的结果。
这并不是说给定的编译器会利用所有可能的优化,当然。例如,当请求一个字符串切片时,不需要创建一个新对象并复制数据 - 新切片可能引用具有偏移量(以及独立存储长度)的旧切片,可能对于大字符串的一个很好的优化,其中采取了许多切片。 Python不会做,因为除非在内存管理中特别小心,否则当实际只需要一小部分时,这可能很容易导致“大”字符串全部保留在内存中 - - 但这是一个权衡,不同的实现可能肯定会选择执行(带有额外内存管理的负担,确保 - 更复杂,更难以调试的编译器和运行时代码的假设有问题的语言)。
我只是在这里摸索 - 如果在可变版本和不可变版本中都存在可互换的字符串类型,那么很多这些优点将难以保留(我怀疑是为什么,就我目前的知识而言)至少,C ++编译器实际上并不打扰这种优化,尽管通常非常注重性能)。但是,通过提供 only 不可变字符串作为基本数据类型(因此当你真的需要一个可变的字符时隐含地接受一些缺点;-),Java和Python等语言可以清楚地获得所有各种优势 - 性能问题只是其中的一组(例如,Python只允许不可变基元类型可选择的选择不是以性能为中心的设计决策 - 它更多地是关于集合的行为的清晰度和可预测性字典! - 。)
答案 1 :(得分:3)
我不知道它们是否真的慢得多,但是他们在很多时候都会考虑编程更容易,因为对象/字符串的状态不能改变。这是对我来说不可变性的最重要的属性。
此外,您可能会认为不可变字符串更快,因为它们具有更少的状态(可以更改),这可能意味着更低的内存消耗,CPU周期。
我在googling期间也发现了这篇有趣的文章,我想引用一下:
知道字符串是不可变的 让它很容易打好 施工时间 - 固定和 不变的存储要求
答案 2 :(得分:3)
使用不可变的字符串,python可以实习它并在内部通过它在内存中的地址引用它。这意味着要比较两个字符串,它只需要比较它们在内存中的地址(除非其中一个没有实现)。另外,请记住并非所有字符串都被实现。我已经看到了没有实习的构造字符串的例子。
使用可变字符串,字符串比较将涉及逐个字符地比较它们,并且还需要在不同位置存储相同的字符串(malloc不是空闲的)或添加逻辑以跟踪给定字符串被引用的次数和如果有多个推荐人,则为每个突变制作副本。
似乎python已针对字符串比较进行了优化。这是有道理的,因为在大多数情况下,即使字符串操作也涉及字符串比较,因此对于大多数用例来说,它是最低的公分母。
不可变字符串的另一个优点是它使它们可以是可散列的,这是将它们用于字典键的要求。想象一下它们是可变的场景:
s = 'a'
d = {s : 1}
s = s + 'b'
d[s] = ?
我想python可以跟踪哪些字符串有哪些字符串作为键,并在修改字符串时更新所有哈希表,但这只是增加了dict插入的开销。如果没有dict插入/查找,你不能在python中做任何,这是非常不合适的,所以这将是非常非常糟糕的。它还增加了字符串操作的开销。
答案 3 :(得分:1)
你问题的明显答案是普通字符串是用C实现的,而MutableString是用Python实现的。
不仅可变字符串上的每个操作都有通过一个或多个Python函数调用的开销,但实现本质上是一个不可变字符串的包装器 - 当你修改字符串时,它会创建一个新的不可变字符串并抛出老人走了。您可以在Python lib目录中的UserString.py文件中读取源代码。
引用Python文档:
注意:
此模块中的此UserString类 可用于落后 仅兼容性。如果你在写作 不需要使用的代码 早于Python的Python版本 2.2,请直接考虑内置str类型的子类 而不是使用UserString(有 没有内置的等价物 MutableString)。
此模块定义了一个行动的类 作为字符串对象的包装器。它 是一个有用的基类 类似于字符串的类,可以继承 来自他们并覆盖现有的 方法或添加新方法。通过这种方式 可以向字符串添加新行为。
应该注意这些类 与...相比效率极低 真正的字符串或Unicode对象;这个 尤其如此 MutableString 强>
(强调补充)。