有条件地将数据分为训练和测试(熊猫)

时间:2019-12-19 22:09:27

标签: python pandas machine-learning

我有一个使用Python执行预测任务的代码。任务是预测公司从2015年到2019年不同年份的销售额。

我想将数据分为训练集和测试集。

但是问题是,我想使用2015年到2018年的数据训练模型,并在2019年的数据上测试模型。

我该如何使用train_test_split,ShuffleSplit和

有条件地拆分数据
X_train = df.iloc[train_index]
X_test = df.iloc[test_index]
y_train = X_train.Sales
y_test = X_test.Sales

1 个答案:

答案 0 :(得分:0)

由于一开始就有条件,您将失去使用机器学习预处理中使用的改组方法的好处。因此,我建议不要在这种情况下进行火车测试拆分(我假设结果有偏差)。不过,如果您需要这样做,请尝试:

train = your_data[your_data['year_column'] < 2019]
test = your_data[your_data['year_column'] == 2019]

X_train = train.loc[:, train.columns != 'column_of_interest']
y_train = train['column_of_interest']
X_test = test.loc[:, test.columns != 'column_of_interest']
y_train = test['column_of_interest']