从多个数据文件中提取列,并将其保存到新数据框中的单独列中

时间:2019-07-31 04:06:41

标签: python pandas

我在一个文件夹中有12个数据文件,每个文件都像这样:

,Unnamed: 0,Date & time Time (s)    00 Nil  01 P1   02 P2   03 P3
0,0,9/9/2013  03:24:36.956017   0.00E+00    0.00E+00    -6.25E-01   -6.25E-01   -4.93E-03
1,1,9/9/2013  03:24:36.966017   1.00E-02    0.00E+00    -6.25E-01   -6.25E-01   -4.49E-03
2,2,9/9/2013  03:24:36.976017   2.00E-02    0.00E+00    -6.25E-01   -6.25E-01   -5.29E-03
3,3,9/9/2013  03:24:36.986017   3.00E-02    0.00E+00    -6.25E-01   -6.25E-01   -4.08E-03
4,4,9/9/2013  03:24:36.996017   4.00E-02    0.00E+00    -6.25E-01   -6.25E-01   -3.32E-03
5,5,9/9/2013  03:24:37.006017   5.00E-02    0.00E+00    -6.25E-01   -6.25E-01   -4.80E-03
6,6,9/9/2013  03:24:37.016017   6.00E-02    0.00E+00    -6.25E-01   -6.25E-01   -4.37E-03
7,7,9/9/2013  03:24:37.026017   7.00E-02    0.00E+00    -6.25E-01   -6.25E-01   -3.68E-03
8,8,9/9/2013  03:24:37.036017   8.00E-02    0.00E+00    -6.25E-01   -6.25E-01   -4.59E-03
9,9,9/9/2013  03:24:37.046017   9.00E-02    0.00E+00    -6.25E-01   -6.25E-01   -3.65E-03
10,10,9/9/2013  03:24:37.056017 1.00E-01    0.00E+00    -6.25E-01   -6.25E-01   -3.93E-03
11,11,9/9/2013  03:24:37.066017 1.10E-01    0.00E+00    -6.25E-01   -6.26E-01   -3.86E-03
12,12,9/9/2013  03:24:37.076017 1.20E-01    0.00E+00    -6.25E-01   -6.25E-01   -3.89E-03

例如,我想从每个数据文件中提取第4列,并将它们全部保存在一个新的数据框中作为单独的列,并且每个列的标题是此列来自的文件的名称。 我找到了这段代码

    import glob
    import numpy as np
    import matplotlib.pyplot
    import pandas as pd

    import glob
    import pandas as pd

    file_list = glob.glob('*.dat')
    cols = [4] # add more columns here

    df = pd.DataFrame()

    for f in file_list:
        df = df.append(
            pd.read_csv(f, delimiter='\s+', header=None, usecols=cols),
            ignore_index=True,    
        )

    arr = df.values

但是,所有数据文件中的列都合并为一个数据帧中的单个列。 我希望将它们分成单独的列,每个列标题都是从中提取列的原始文件的名称。 有人可以帮我吗?我是python的新手

1 个答案:

答案 0 :(得分:1)

您可以将每个csv读取为单独的数据框,并将它们保存在列表中,然后处理这些数据框:

dataFrames = []
for f in file_list:
        df = pd.read_csv(f, delimiter='\s+', header=None, usecols=cols)
        dataFrames.append(df)