我试图通过在窗口中滚动行值来创建新的pandas数据帧。即
A R N D C Q
-1 -2 -3 -3 -1 -2
-1 -2 -3 -3 -1 -2
-1 -2 -3 -3 -1 -2
-1 -2 -3 -3 -1 -2
这样的事情:
A1 R1 N1 D1 C1 Q1 A2 R2 N2 D2 C2 Q2 … An Rn Nn Dn Cn Qn
-1 -2 -3 -3 -1 a -1 -2 -3 -3 -1 b
-1 -2 -3 -3 -1 b -1 -2 -3 -3 -1 c
-1 -2 -3 -3 -1 c -1 -2 -3 -3 -1 d
-1 -2 -3 -3 -1 d
. . . . . .
它类似于字符串中的滚动窗口,即
带有窗口3的EXAM
将产生EXA,XAM
。这里的关键区别在于,我尝试按行创建窗口,而不是字母。这个新的数据帧将用于训练svm。虽然我可以使用与其他列对应的缩放值创建另一个列(单个列更容易滚动),但我想我会丢失一些信息,这就是我采用完整列的原因。
从本质上讲,我尝试做类似的事情,但对于n
窗口大小:
答案 0 :(得分:1)
您可以使用numpy索引来完成此任务:
In [1]: import pandas as pd
...: import numpy as np
...: import string
...:
In [2]: abc = list(string.ascii_letters.upper())
...: df = pd.DataFrame(dict(a=abc, b=abc[::-1]))
...: df.head()
...:
Out[2]:
a b
0 A Z
1 B Y
2 C X
3 D W
4 E V
In [3]: # construct a indexing array
...: vals = df.values
...: idx = np.tile(np.arange(5), (len(df) - 5,1)) + np.arange(len(df) - 5).reshape(-1,1)
...: idx[:10]
...:
Out[3]:
array([[ 0, 1, 2, 3, 4],
[ 1, 2, 3, 4, 5],
[ 2, 3, 4, 5, 6],
[ 3, 4, 5, 6, 7],
[ 4, 5, 6, 7, 8],
[ 5, 6, 7, 8, 9],
[ 6, 7, 8, 9, 10],
[ 7, 8, 9, 10, 11],
[ 8, 9, 10, 11, 12],
[ 9, 10, 11, 12, 13]])
In [4]: # construct columns and index using flattened index array
...: cols = [ "{}_{}".format(c,str(i)) for i in range(5) for c in df.columns]
...: df2 = pd.DataFrame(vals[idx.flatten()].reshape(len(df)-5,df.shape[1]*5), columns=cols)
...: df2.head()
...:
Out[4]:
a_0 b_0 a_1 b_1 a_2 b_2 a_3 b_3 a_4 b_4
0 A Z B Y C X D W E V
1 B Y C X D W E V F U
2 C X D W E V F U G T
3 D W E V F U G T H S
4 E V F U G T H S I R