为目录中的所有文件运行Python脚本

时间:2018-11-22 13:50:36

标签: python loops directory nltk stemming

我的编程技能非常有限(x10)。 但是我有这个小的python脚本:

#load data
files = '/Users/xxx/Desktop/Test_SP/a.txt'
file = open(files, 'rt')
text = file.read()
file.close()
# split into words
from nltk.tokenize import word_tokenize
tokens = word_tokenize(text)
# stemming of words
from nltk.stem.porter import PorterStemmer
porter = PorterStemmer()
stemmed = [porter.stem(word) for word in tokens]
print(stemmed[:20])

有人可以告诉我如何针对此目录中的所有文件/Users/xxx/Desktop/Test_SP)运行该脚本,而不能一次运行一次(a.txt

(我已经了解了glob,os.walk等,但是我无法使其正常工作。我们非常感谢您的帮助。)

1 个答案:

答案 0 :(得分:1)

您提到的所有功能都应该可以迭代文件夹中的所有文件。顺便说一句,当尝试使用那些方法(globos.walk等)运行时,您的错误是什么? 这是我的listdir解决方案:

import os
files_path = '/Users/xxx/Desktop/Test_SP/'
for filename in os.listdir(files_path):
    # only care the txt files
    if filename.endswith(".txt"):
        #load data
        file = open("{}/{}".format(files_path,filename))
        text = file.read()
        file.close()
        # split into words
        from nltk.tokenize import word_tokenize
        tokens = word_tokenize(text)
        # stemming of words
        from nltk.stem.porter import PorterStemmer
        porter = PorterStemmer()
        stemmed = [porter.stem(word) for word in tokens]
        # write on the same file with input
        with open("{}/{}".format(files_path,filename), 'w') as fout:
            fout.write(stemmed[:20])