Question

我希望我的Spring批处理应用程序一次从数据库中读取50条记录，然后将这50条记录发送到处理器，然后发送给编写器。

有人可以告诉我如何做到这一点。

我尝试使用JdbcPagingItemReader并将pageSize设置为50，其中读取50条记录，但rowMapper，处理器和编写器一次只接收一条记录，而不是获取50条记录。

如何使处理器和编写器在dto中获得50条记录而不是一次接收一条记录？

xml spring config

<job id="indexJob" job-repository="jobRepository">
    <step id="job1">
        <tasklet transaction-manager="transactionManager">
            <chunk reader="reader" processor="processor" writer="writer" commit-interval="1"/>
        </tasklet>
    </step>
</job>

Java spring配置

@Bean
@Scope("step")
public JdbcPagingItemReader reader() throws Exception {

    MySqlPagingQueryProvider provider = new MySqlPagingQueryProvider();
    provider.setSelectClause("select id");
    provider.setFromClause("from BATCH_CUSTOMER");
    provider.setSortKey("id");

    JdbcPagingItemReader reader = new JdbcPagingItemReader();
    reader.setDataSource(this.dataSource());
    reader.setQueryProvider(provider);
    reader.setPageSize(50);
    reader.setRowMapper(new MyRowMapper());
    reader.afterPropertiesSet();

    int counter = 0;
    ExecutionContext executionContext = new ExecutionContext();
    reader.open(executionContext);
    Object pageCredit = new Object();
    while (pageCredit != null) {
        pageCredit = reader.read();
        System.out.println("pageCredit:" + pageCredit);
        counter++;
    }
    reader.close();

    return reader;
}

Answer 1

在xml配置中，将commit-interval更改为50。

Answer 2

在Spring批处理论坛中回答

http://forum.springsource.org/showthread.php?136209-JdbcPagingItemReader-not-passing-all-page-records-to-the-processor&p=442538#post442538

所有设计都是想要处理每条记录。 ItemWriter获取所需数量的记录，但受commit-interval的约束。你的是1，这意味着每个记录都是单独提交的，我建议你把它设置为50.处理器自己处理每个记录，直到达到提交间隔，然后调用编写器。如上所述，你的是1。

Spring批量读取多条记录并处理多条记录

2 个答案: