高效处理DL4J的位值输入

时间:2019-05-09 18:52:39

标签: deeplearning4j dl4j

如何最好地处理DL4J的位值输入?我目前将它们存储为黑白图像(png),以节省磁盘空间,但理想情况下,我想自己将数据加载到内存中(最好是字节数组,但图像也可以工作),而不必生成临时文件。是否有一个合理的简单方法(和/或某个地方,我可以找到一个类似的例子在做),是否有任何明显的缺点(在内存使用方面)?我假设/希望有一些我可以实现的接口,让DL4J从我的代码中请求数据,但是我没有设法找到任何相关信息。

奖金问题:我还给人留下了这样的印象:使用图像而不是csv文件可以让我在内存受到一定限制的图形卡上运行更大的批处理大小,这是正确的还是仅仅是fl幸(这也是我经常使用的那个)我的显示器,所以我猜想实际图形会与DL4J竞争内存,从而使短缺有些随机)?

edit:为澄清起见,我并不是在寻求完整的解决方案,我只是在寻找一些指向示例或文档的入门指南(我以为我表达得很清楚,但可能不够清晰),做了大量的搜索(但是我发现的实质是关于“文件拆分”的,也许我只是不知道在dl4j术语中搜索什么)。

0 个答案:

没有答案