用Python替换文件中的字符串

时间:2009-10-20 22:17:56

标签: python regex search replace operating-system

如何在给定目录及其子目录中递归替换给定替换的匹配?

伪代码

import os
import re
from os.path import walk
for root, dirs, files in os.walk("/home/noa/Desktop/codes"):
        for name in dirs:
                re.search("dbname=noa user=noa", "dbname=masi user=masi")
                   // I am trying to replace here a given match in a file

5 个答案:

答案 0 :(得分:23)

将所有这些代码放入名为mass_replace的文件中。在Linux或Mac OS X下,您可以执行chmod +x mass_replace然后运行它。在Windows下,您可以使用python mass_replace然后使用适当的参数运行它。

#!/usr/bin/python

import os
import re
import sys

# list of extensions to replace
DEFAULT_REPLACE_EXTENSIONS = None
# example: uncomment next line to only replace *.c, *.h, and/or *.txt
# DEFAULT_REPLACE_EXTENSIONS = (".c", ".h", ".txt")

def try_to_replace(fname, replace_extensions=DEFAULT_REPLACE_EXTENSIONS):
    if replace_extensions:
        return fname.lower().endswith(replace_extensions)
    return True


def file_replace(fname, pat, s_after):
    # first, see if the pattern is even in the file.
    with open(fname) as f:
        if not any(re.search(pat, line) for line in f):
            return # pattern does not occur in file so we are done.

    # pattern is in the file, so perform replace operation.
    with open(fname) as f:
        out_fname = fname + ".tmp"
        out = open(out_fname, "w")
        for line in f:
            out.write(re.sub(pat, s_after, line))
        out.close()
        os.rename(out_fname, fname)


def mass_replace(dir_name, s_before, s_after, replace_extensions=DEFAULT_REPLACE_EXTENSIONS):
    pat = re.compile(s_before)
    for dirpath, dirnames, filenames in os.walk(dir_name):
        for fname in filenames:
            if try_to_replace(fname, replace_extensions):
                fullname = os.path.join(dirpath, fname)
                file_replace(fullname, pat, s_after)

if len(sys.argv) != 4:
    u = "Usage: mass_replace <dir_name> <string_before> <string_after>\n"
    sys.stderr.write(u)
    sys.exit(1)

mass_replace(sys.argv[1], sys.argv[2], sys.argv[3])
编辑:我已从原始答案中更改了上述代码。有几处变化。首先,mass_replace()现在调用re.compile()来预编译搜索模式;第二,为了检查文件的扩展名,我们现在将一个文件扩展名元组传递给.endswith(),而不是调用.endswith()三次;第三,它现在使用最近版本的Python中提供的with语句;最后,file_replace()现在检查是否在文件中找到了模式,如果找不到模式,则不会重写文件。 (旧版本会重写每个文件,即使输出文件与输入文件相同,也会更改时间戳;这样做不够优雅。)

编辑:我将此更改为默认替换每个文件,但您可以编辑一行以将其限制为特定扩展名。我认为替换每个文件是一个更有用的开箱即用的默认值。这可以通过不触及的扩展名或文件名列表,使其不区分大小写的选项等进行扩展。

编辑:在评论中,@ asciimo指出了一个错误。我编辑了这个来修复bug。记录str.endswith()以接受要尝试的字符串元组,但不是列表。固定。另外,我做了一些函数接受一个可选参数,让你传入一个扩展元组;修改它以接受命令行参数来指定哪些扩展名应该很容易。

答案 1 :(得分:9)

你真的需要正则表达式吗?

import os

def recursive_replace( root, pattern, replace )
    for dir, subdirs, names in os.walk( root ):
        for name in names:
            path = os.path.join( dir, name )
            text = open( path ).read()
            if pattern in text:
                open( path, 'w' ).write( text.replace( pattern, replace ) )

答案 2 :(得分:3)

当然,如果你只想在不编码的情况下完成它,请使用find和xargs:

find /home/noa/Desktop/codes -type f -print0 | \
xargs -0 sed --in-place "s/dbname=noa user=noa/dbname=masi user=masi"

(你可以用find -'sc或者其他东西来做这件事,但我更喜欢xargs。)

答案 3 :(得分:2)

这是我使用python查找和替换文件中的字符串的方法。这是一个简单的小函数,它将以递归方式在目录中搜索字符串并将其替换为字符串。您还可以限制具有特定文件扩展名的文件,如下例所示。

import os, fnmatch
def findReplace(directory, find, replace, filePattern):
    for path, dirs, files in os.walk(os.path.abspath(directory)):
        for filename in fnmatch.filter(files, filePattern):
            filepath = os.path.join(path, filename)
            with open(filepath) as f:
                s = f.read()
            s = s.replace(find, replace)
            with open(filepath, "w") as f:
                f.write(s)

这允许您执行以下操作:

findReplace("some_dir", "find this", "replace with this", "*.txt")

答案 4 :(得分:2)

这应该有效:

import re, os
import fnmatch
for path, dirs, files in os.walk(os.path.abspath(directory)):
       for filename in fnmatch.filter(files, filePattern):
           filepath = os.path.join(path, filename)
           with open("namelist.wps", 'a') as out:
               with open("namelist.wps", 'r') as readf:
                   for line in readf:
                       line = re.sub(r"dbname=noa user=noa", "dbname=masi user=masi", line)
                       out.write(line)