Spring Batch ItemReader列表只处理一次

时间:2013-08-29 19:39:14

标签: java spring spring-batch

我尝试使用ListItemReader<String>ItemProcessor<String, String>ItemWriter<String>创建一个Spring Batch作业。

XML如下所示,

<job id="sourceJob" xmlns="http://www.springframework.org/schema/batch">
    <step id="step1" next="step2">
        <tasklet>
            <chunk reader="svnSourceItemReader" 
                processor="metadataItemProcessor" 
                writer="metadataItemWriter" 
                commit-interval="1" />
        </tasklet>
    </step>
    <step id="step2">
        <tasklet ref="lastRevisionLoggerTasklet"></tasklet>
    </step>
</job>

<bean id="svnSourceItemReader" 
        class="com.example.repository.batch.SvnSourceItemReader" 
        scope="prototype">
    <constructor-arg index="0">
        <list>
            <value>doc1.xkbml</value>
            <value>doc2.xkbml</value>
            <value>doc3.xkbml</value>
        </list>
    </constructor-arg>
</bean>

<bean id="metadataItemProcessor" 
        class="com.example.repository.batch.MetadataItemProcessor" 
        scope="prototype" />

<bean id="metadataItemWriter" 
        class="com.example.repository.batch.MetadataItemWriter" 
        scope="prototype" />

读者,处理者和作家都是香草,

public class SvnSourceItemReader extends ListItemReader<String> {

    public SvnSourceItemReader(List<String> list) {
        super(list);
        System.out.println("Reading data list " + list);
    }

    @Override
    public String read() {
        String out = (String) super.read();
        System.out.println("Reading data " + out);
        return out;
    }

}

public class MetadataItemProcessor implements ItemProcessor<String, String> {

    @Override
    public String process(String i) throws Exception {
        System.out.println("Processing " + i + " : documentId " + documentId);
        return i;
    }

}

public class MetadataItemWriter implements ItemWriter<String> {

    @Override
    public void write(List<? extends String> list) throws Exception {
        System.out.println("Writing " + list);
    }

}

这项工作就是这样开始的,但按照每10秒计划一次。

long nanoBits = System.nanoTime() % 1000000L;
if (nanoBits < 0) {
    nanoBits *= -1;
}
String dateParam = new Date().toString() + System.currentTimeMillis() 
        + "." + nanoBits;
param = new JobParametersBuilder().addString("date", dateParam)
        .toJobParameters();
JobExecution execution = jobLauncher.run(job, param);

当应用程序启动时,我看到它读取,处理并写入传递给阅读器的列表中的三个项目。

Reading data doc1.xkbml
Processing doc1.xkbml : documentId doc1
Writing [doc1.xkbml]
Reading data doc2.xkbml
Processing doc2.xkbml : documentId doc2
Writing [doc2.xkbml]
Reading data doc3.xkbml
Processing doc3.xkbml : documentId doc3
Writing [doc3.xkbml]

因为这个sourceJob在计划的计时器上,所以我每隔10秒就会看到该列表被处理,但我会在所有后续运行中看到。

Reading data null

有谁知道为什么会这样?我是Spring Batch的新手,只是无法解决问题。

谢谢/ w

2 个答案:

答案 0 :(得分:14)

问题是您将阅读器标记为scope="prototype"。它应该是scope="step"

在Spring-batch中,只有两个范围:singleton(默认值)和step

来自javadoc

  

StepScope
步骤上下文的范围。此范围内的对象使用   Spring容器作为对象工厂,因此只有一个实例   每个执行步骤中的这样一个bean。此范围内的所有对象都是    (无需修饰bean定义)。

  

为了使用后期绑定,需要使用步骤范围   实际上,在步骤开始之前,bean无法实例化   允许找到属性。

在Spring上下文启动期间查看您的日志,您将看到以下行:

  

信息:完成从类路径资源执行SQL脚本   [org / springframework / batch / core / schema-hsqldb.sql] 9毫秒   读取数据列表[doc1.xkbml,doc2.xkbml,doc3.xkbml]

正如您所看到的,您的读者已经被创建并作为单身人士进行管理; Spring-batch上下文中的动态bean应该使用特殊的step作用域进行管理,这样Spring每次执行一个步骤时都会创建bean的新副本。

在您的读者中,ListItemReader.read()写成:

public T read() {
  if (!list.isEmpty()) {
    return list.remove(0);
  }
  return null;
}

在每个阅读项目中从原始列表中删除!读者构造一次,在第二次作业执行时,列表为空!

答案 1 :(得分:4)

只是一个附加信息:您也可以使用JavaConfig而不是xml配置文件,并使用@StepConfig注释reader bean声明。

前:

@Configuration
@EnableBatchProcessing
public class MyConfig {
...

    @Bean
    @StepScope
    public ItemReader<HeadingBreakevenAssociation> readerHeadingBreakevenAssociationList(){
         ItemReader<Person> itemReader = new ListItemReader<Person>(myList);

          return itemReader;
    }

}