[SPRING] 작업을 성공적으로 끝내려면 .tasklet () / .chunk ()를 어떻게 사용해야합니까?
SPRING작업을 성공적으로 끝내려면 .tasklet () / .chunk ()를 어떻게 사용해야합니까?
원본 데이터베이스에서 대상 데이터베이스로 테이블을 복제 할 때 Spring Batch를 사용합니다. 작업은 매개 변수를 전달하는 jobLauncher를 사용하여 서비스 계층에서 수동으로 시작됩니다.
모든게 괜찮지 만 현재 단계의 설명에서 .chunk (10)를 사용하여 현재 구성을 사용하면 복제 된 행이 10 개뿐입니다. java.sql.SQLException : Result set already closed exception.
어떻게 제대로 단계를 설명하기 만하면 읽기 -> 전체 테이블을 원본에서 대상 DB로 작성합니까?
@Configuration
@EnableBatchProcessing
public class DatasetProcessingContext {
private static final String OVERRIDEN_BY_JOB_PARAMETER = null;
private static final String DATASET_PROCESSING_STEP = "datasetProcessingStep";
private static final String DATASET_PROCESSING_JOB = "datasetProcessingJob";
public static final String SUBSYSTEM = "subsystem";
public static final String SQL = "sql";
public static final String SOURCE_DATASOURCE = "sourceDatasource";
public static final String INSERT_QUERY = "insertQuery";
public static final String TARGET_DATASOURCE = "targetDatasource";
@Autowired
@Qualifier(DEV_DATA_SOURCE)
private DataSource devDataSource;
//set of datasources
@Autowired
private PlatformTransactionManager transactionManager;
@SuppressWarnings("MismatchedQueryAndUpdateOfCollection")
@Autowired
private Map<String, TableMessageDataRowMapper> tableMessageDataRowMappers;
@SuppressWarnings("MismatchedQueryAndUpdateOfCollection")
@Autowired
private Map<String, TableMessageDataPreparedStatementSetter> messageDataPreparedStatementSetters;
@Autowired
private JobBuilderFactory jobsFactory;
@Autowired
private StepBuilderFactory stepsFactory;
@Bean
public JobRepository jobRepository() throws Exception {
return new MapJobRepositoryFactoryBean(transactionManager).getObject();
}
@Bean
public JobRegistry jobRegistry() {
return new MapJobRegistry();
}
@Bean
public JobRegistryBeanPostProcessor jobRegistryBeanPostProcessor() {
JobRegistryBeanPostProcessor postProcessor = new JobRegistryBeanPostProcessor();
postProcessor.setJobRegistry(jobRegistry());
return postProcessor;
}
@Bean
public JobLauncher jobLauncher() throws Exception {
SimpleJobLauncher jobLauncher = new SimpleJobLauncher();
jobLauncher.setJobRepository(jobRepository());
return jobLauncher;
}
@Bean
public static StepScope stepScope() {
return new StepScope();
}
@Bean
@SuppressWarnings("unchecked")
@Scope(value = "step", proxyMode = ScopedProxyMode.INTERFACES)
public ItemStreamReader jdbcReader(@Value("#{jobParameters['" + SUBSYSTEM + "']}") String subsystem,
@Value("#{jobParameters['" + SQL + "']}") String sql,
@Value("#{jobParameters['" + SOURCE_DATASOURCE + "']}") String sourceDatasource) {
JdbcCursorItemReader jdbcCursorItemReader = new JdbcCursorItemReader();
jdbcCursorItemReader.setDataSource(getDataSourceFromEnum(TargetDataSource.valueOf(sourceDatasource)));
jdbcCursorItemReader.setSql(sql);
jdbcCursorItemReader.setRowMapper((RowMapper) tableMessageDataRowMappers
.get(subsystem + TABLE_MESSAGE_DATA_ROW_MAPPER));
return jdbcCursorItemReader;
}
@Bean
@SuppressWarnings("unchecked")
@Scope(value = "step", proxyMode = ScopedProxyMode.INTERFACES)
public ItemWriter jdbcWriter(@Value("#{jobParameters['" + SUBSYSTEM + "']}") String subsystem,
@Value("#{jobParameters['" + INSERT_QUERY + "']}") String insertQuery,
@Value("#{jobParameters['" + TARGET_DATASOURCE + "']}") String targetDatasource) {
JdbcBatchItemWriter jdbcWriter = new JdbcBatchItemWriter();
jdbcWriter.setDataSource(getDataSourceFromEnum(TargetDataSource.valueOf(targetDatasource)));
jdbcWriter.setSql(insertQuery);
jdbcWriter.setItemPreparedStatementSetter(messageDataPreparedStatementSetters
.get(subsystem + TABLE_MESSAGE_DATA_PREPARED_STATEMENT_SETTER));
return jdbcWriter;
}
@Bean
@SuppressWarnings("unchecked")
public Step datasetProcessingStep() {
return stepsFactory.get(DATASET_PROCESSING_STEP)
// should I create Tasklet or chunk with some CompletionPolicy?
.chunk(10)
.reader(jdbcReader(OVERRIDEN_BY_JOB_PARAMETER, OVERRIDEN_BY_JOB_PARAMETER, OVERRIDEN_BY_JOB_PARAMETER))
.writer(jdbcWriter(OVERRIDEN_BY_JOB_PARAMETER, OVERRIDEN_BY_JOB_PARAMETER, OVERRIDEN_BY_JOB_PARAMETER))
.allowStartIfComplete(true)
.build();
}
@Bean
public Job datasetProcessingJob() {
return jobsFactory.get(DATASET_PROCESSING_JOB).start(datasetProcessingStep()).build();
}
해결법
-
==============================
1.단계 설명에서 .chunk (new DefaultResultCompletionPolicy ())를 사용하면 내 경우에 적합합니다. 이 정책은 null-result의 경우 ResultSet이 끝난 것보다 isComplete (RepeatContext context, RepeatStatus 결과)에서 true를 반환합니다.
단계 설명에서 .chunk (new DefaultResultCompletionPolicy ())를 사용하면 내 경우에 적합합니다. 이 정책은 null-result의 경우 ResultSet이 끝난 것보다 isComplete (RepeatContext context, RepeatStatus 결과)에서 true를 반환합니다.
from https://stackoverflow.com/questions/32647018/how-should-i-use-tasklet-chunk-to-finish-job-succesfully by cc-by-sa and MIT license
'SPRING' 카테고리의 다른 글
[SPRING] 봄 부팅 CSS 빈 / 모든 것을 시도한 후에 로딩하지 않는 것을 보여주는 (0) | 2019.01.23 |
---|---|
[SPRING] loginService가 null 인 이유는 무엇입니까? (0) | 2019.01.23 |
[SPRING] 엔티티와 저장소가 동일한 여러 데이터 소스 (0) | 2019.01.23 |
[SPRING] 원인 : java.lang.ClassNotFoundException : org.dom4j.io.STAXEventReader (0) | 2019.01.23 |
[SPRING] 스프링 통합에서 동적으로 ftp 어댑터를 만드는 방법은 무엇입니까? (0) | 2019.01.23 |