如何使用DSL跳过springcloudstream中文件的标题行(第一行)?

时间:2017-08-29 17:51:06

标签: spring-integration spring-cloud-stream spring-dsl spring-integration-dsl

我正在使用Spring云流来读取文件并使用文件分割器进行拆分,并使用DSL样式将每行作为消息发出,读取的文件有一个标题行,只是想知道是否有一种简单的方法可以跳过标题在阅读之前/之后排。

感谢任何帮助。

这是我的分割器和integrationFlow的样子:

enter code here
  return IntegrationFlows
            .from("....")
            .split(Files.splitter(true, true)/
            .charset(StandardCharsets.UTF_8)
            .applySequence(true), //emmit sequenceNumber to header
             e -> e.id("fileSplitter")
            );


enter code here
    IntegrationFlow integrationFlow = integrationFlowBuilder
            .<Object, Class<?>>route(Object::getClass, m -> m
                    .channelMapping(FileSplitter.FileMarker.class, "markers.input")
                    .channelMapping(String.class, "lines.input"))
            .get();

2 个答案:

答案 0 :(得分:1)

如果我正确阅读了您正在使用我们的OOB应用程序之一,文件来源:https://github.com/spring-cloud-stream-app-starters/file/blob/master/spring-cloud-starter-stream-source-file/README.adoc并使用Spring {{{{}}部署使用Spring {0}}等正确?

如果是这样,当您在行模式下读取文件时,会出现一个名为stream create file ----file.consumer.mode=lines --file.directory=/tmp/ | sink的特殊标题。您可以在两者之间添加一个过滤器,以根据标题表达式删除这些消息。

答案 1 :(得分:0)

Spring Integration 5.1.5解决方案:

@Bean
public MessageSource<File> sourceDirectory() {
    FileReadingMessageSource messageSource = new FileReadingMessageSource();
    messageSource.setDirectory(new File("./data/input"));
    return messageSource;
}

@Bean
public IntegrationFlow folderFlow() {
    FileSplitter fileSplitter = new FileSplitter();
    fileSplitter.setFirstLineAsHeader("columns");
    return IntegrationFlows.from(sourceDirectory(), configurer -> configurer.poller(Pollers.fixedDelay(1000)))
            .split(fileSplitter)
            .handle(System.out::println)
            .get();
}