Python:从多个文本文件中提取一列数据

时间:2018-08-03 16:22:25

标签: python parsing tab-delimited-text

在这个问题上,我一直很努力地挠头。我有几个文本文件,都具有相同的格式:

   99.00%   2874    2874    U   0   unclassified
  1.00% 29  0   R   1   root
  1.00% 29  0   R1  131567    cellular organisms
  1.00% 29  0   D   2759        Eukaryota
  1.00% 29  0   D1  33154         Opisthokonta
  1.00% 29  0   K   4751            Fungi
  1.00% 29  0   K1  451864            Dikarya

我想从所有这些文件中提取第六列,并将其打印到新文件中。

这是我到目前为止的代码:

import sys
import os
import glob

# Usage: python extract_species.py path/to/folder > output.txt

def extractSpecies(fileContent, allSpecies):
    for line in fileContent.split('\n'):
        allSpecies.append(line.split('\t')[0])

def file_get_contents(filename):
    with open(filename) as f:
        return f.read()

def listdir_fullpath(d):
    return [os.path.join(d, f) for f in os.listdir(d)]

allFiles = listdir_fullpath(sys.argv[1]) # List all files in the folder provided by system arg.

# Read all files and store content in memory
filesContent = [] # a list is created with one item per file.
for filePath in allFiles:
    filesContent.append(file_get_contents(filePath))

# Extract all species and create a unique list
allSpecies = []
for fileContent in filesContent:
    extractSpecies(fileContent, allSpecies)

print(allSpecies)

但是此代码仅提供数据第一列的值:

99.00%   1.00%   1.00%   1.00%   1.00%   1.00%   1.00%

如果我在第7行中删除了[0]参数(在“ allSpecies.append(line.split('\ t')”之后)),则对象allSpecies将包含文件中的所有数据。

[' 99.00%', '2874', '2874', 'U', '0', 'unclassified'] ['  1.00%', '29', '0', 'R', '1', 'root'] ['  1.00%', '29', '0', 'R1', '131567', '  cellular organisms'] ['  1.00%', '29', '0', 'D', '2759', '    Eukaryota'] ['  1.00%', '29', '0', 'D1', '33154', '      Opisthokonta'] etc

我以为我可以简单地将[0]更改为我感兴趣的列的编号(从1到5),但是不,如果我这样做,我会收到一条错误消息:

IndexError: list index out of range

哪个真的让我感到困惑。确实有一些我真正不了解的东西:如何提取第一列的值,但不能提取其他任何列的值。欢迎提出任何建议...

1 个答案:

答案 0 :(得分:0)

我认为您在消除零的正确道路上。然后,您可以遍历allSpecies并按索引获取列。

column6 = []
for x in allSpecies:
    column6.append(allSpecies[x][5])