Beam-从本地文件系统读取文件不支持glob

时间:2019-07-29 09:42:55

标签: apache-beam

我正在尝试为我的Beam管道编写集成测试,并且从本地文件系统读取时,Beam似乎不支持regex或glob,对吗?有解决方法吗?

您也可以在https://github.com/apache/beam/blob/master/sdks/java/core/src/main/java/org/apache/beam/sdk/io/LocalFileSystem.java

中看到它

从222行开始,它检查给定的规范,好像它是一个文件,如果不存在,则检查其父目录,仅在之后才进行glob匹配,但是我们没有到那部分,因此它找不到目录。 我的球看起来像这样:/A/B/a=[0-9][0-9][0-9]/*/*

0 个答案:

没有答案