这段代码就是我用过的。
dataset = np.loadtxt('path to dataset', delimeter=',')
x_train=dataset[:700,0:3]
y_train=dataset[:700,3]
x_test=dataset[700:,0:3]
y_test=dataset[700:,3]
我有数十亿的学习数据。
将此数据放入csv文件对计算机来说是一件痛苦的事。
我使用'sleep'一次将100,000个数据提取到一个numpy数组中。
有没有办法直接以csv格式读取内存中的数据？