我在磁盘上保存了大量NumPy数组。我想在培训中有效地同时阅读它们。我无法将它们全部加载到内存中 - 数据集太大。 此外,动态应用一些用户定义的转换会很不错。能够从C ++中读取它们也是很好的,而不仅仅是Python。
我相信CNTK现在没有此功能,我是否正确?
答案 0 :(得分:1)
目前,我们没有内置的numpy阅读器。但是,您有多种选择:
分批阅读numpy数据并将其提供给培训师,这里有一个将图像读入numpy数组并将其提供给培训师的示例: https://github.com/Microsoft/FERPlus
numpy数组中的数据是什么?你能把它转换成CNTK读者之一可读的格式吗?