我正在使用@ shai的代码将数据转换为hdf5，但转换后的数据大小太大，大于caffe的限制大小（2GB） 所以，我的问题是我们应该如何分割数据？ 我们只需要单独转换数据取决于我们想要什么？
答案 0 :(得分：0)
获得更多信息以提供更好的答案会很有帮助。请给出Caffe给你的实际错误。究竟什么大于2GB？是txt文件吗？
HDF5效率不高。我建议使用数据库层（http://caffe.help/manual/layers/data.html）或编写自己的自定义Python层（http://caffe.help/manual/layers/python.html）。