我创建了一个春季批处理来查询Azure SQL Server数据库并将数据写入CSV文件。我没有数据库的create
权限。运行批处理时出现此错误Invalid Object name BATCH_JOB_INSTANCE
。我不希望在主数据库中创建spring batch元数据表。如果我可以将它们放在另一个本地或内存数据库(如h2db)中,将很有帮助。
我也已经添加了spring-batch-initialize-schema=never
,大多数类似问题的答案都是这种情况,但这没有帮助。
编辑:
我解决了Invalid Object name
错误,方法是扩展DefaultBatchConfigurer
类并覆盖setDataSource
方法,从而防止将元数据表创建到主数据库中,从而在-内存映射存储库。现在,我想尝试两个选项:
@Configuration
public class SpringBatchConfig extends DefaultBatchConfigurer{
@Override
public void setDataSource(DataSource datasource) {
}
...
我的application.properties文件如下:
spring.datasource.url=
spring.datasource.username=
spring.datasource.password=
spring.datasource.driver-class-name=com.microsoft.sqlserver.jdbc.SQLServerDriver
spring-batch-initialize-schema=never
spring.batch.job.enabled=false
spring.jpa.hibernate.ddl-auto=update
spring.jpa.show-sql=true
spring.jpa.properties.hibernate.dialect=org.hibernate.dialect.SQLServer2012Dialect
答案 0 :(得分:0)
如何在本地数据库或内存数据库(如h2db)中创建元数据表。
您可以使用spring.batch.initialize-schema=embedded
。
或者如果我已经在主数据库中创建了元数据表,则其模式与我要从中获取的主表不同。如何将我的工作指向另一个架构中的那些元数据表,以在其中存储工作和步骤详细数据。
spring batch适用于数据源,而不是特定的架构。如果元数据表位于不同的架构中,那么您需要创建另一个指向该架构的数据源并将其设置在作业存储库上。
答案 1 :(得分:0)
我创建了一个具有两个数据源的演示。批处理元数据将存储在H2 DB中,而Job数据源是Azure SQL。
这是项目结构:
DataSourceConfig
类,并为DataSource bean使用@Primary
注释:@Configuration
public class DataSourceConfig {
@Bean(name = "mssqlDataSource")
@ConfigurationProperties(prefix = "spring.datasource")
public DataSource appDataSource(){
return DataSourceBuilder.create().build();
}
@Bean(name = "h2DataSource")
@Primary
// @ConfigurationProperties(prefix="spring.datasource.h2")
public DataSource h2DataSource() {
return DataSourceBuilder.create()
.url("jdbc:h2:mem:thing:H2;DB_CLOSE_DELAY=-1;DB_CLOSE_ON_EXIT=FALSE")
.driverClassName("org.h2.Driver")
.username("sa")
.password("")
.build();
}
}
@Autowired @Qualifier("mssqlDataSource")
在Spring Batch任务中指定数据源:@Configuration
public class ItemReaderDbDemo {
//generate task Object
@Autowired
private JobBuilderFactory jobBuilderFactory;
//Step exec tasks
//generate step Object
@Autowired
private StepBuilderFactory stepBuilderFactory;
@Autowired
@Qualifier("mssqlDataSource")
private DataSource dataSource;
@Autowired
@Qualifier("dbJdbcWriter")
private ItemWriter<? super Todo> dbJdbcWriter;
@Bean
public Job itemReaderDbDemoJob() {
return jobBuilderFactory.get("itemReaderDbDemoJob").start(itemReaderDbStep()).build();
}
@Bean
public Step itemReaderDbStep() {
return stepBuilderFactory.get("itemReaderDbStep")
.<Todo,Todo>chunk(2)
.reader(dbJdbcReader())
.writer(dbJdbcWriter)
.build();
}
@Bean
@StepScope
public JdbcPagingItemReader<Todo> dbJdbcReader() {
JdbcPagingItemReader<Todo> reader = new JdbcPagingItemReader<Todo>();
reader.setDataSource(dataSource);
reader.setFetchSize(2);
reader.setRowMapper(new RowMapper<Todo>() {
@Override
public Todo mapRow(ResultSet rs, int rowNum) throws SQLException {
Todo todo = new Todo();
todo.setId(rs.getLong(1));
todo.setDescription(rs.getString(2));
todo.setDetails(rs.getString(3));
return todo;
}
});
SqlServerPagingQueryProvider provider = new SqlServerPagingQueryProvider();
provider.setSelectClause("id,description,details");
provider.setFromClause("from dbo.todo");
//sort
Map<String,Order> sort = new HashMap<>(1);
sort.put("id", Order.DESCENDING);
provider.setSortKeys(sort);
reader.setQueryProvider(provider);
return reader;
}
}
logging.level.org.springframework.jdbc.core=DEBUG
spring.datasource.driverClassName=com.microsoft.sqlserver.jdbc.SQLServerDriver
spring.datasource.jdbcUrl=jdbc:sqlserver://josephserver2.database.windows.net:1433;database=<Your-Database-Name>;encrypt=true;trustServerCertificate=false;hostNameInCertificate=*.database.windows.net;loginTimeout=30;
spring.datasource.username=<Your-UserName>
spring.datasource.password=<Your-Password>
spring.datasource.initialization-mode=always