Spring Batch에서 작업 속도를 향상시키기 위해 Tasklet 기반 순차 처리, Chunk 기반 순차 처리, 멀티스레드를 활용한 Chunk 기반 병렬 처리 방식을 단계적으로 적용하여 그 결과를 정리하였습니다.

데이터 세트

1. Tasklet 기반 순차 처리

SpringBatch를 처음 접한 상황에서 Tasklet이 구현이 간단하고 직관적이어서 적용하였습니다.

특징

• 간단한 작업 단위로 구성
• 한 번에 전체 데이터를 처리
• 순차적으로 실행되어 작업 간 의존성 관리가 용이

적용 방식

@Bean
public Tasklet statVideoTasklet() {
    return (contribution, chunkContext) -> {
        batchStatisticService.updateDailyViewVideo(LocalDate.now());
        return RepeatStatus.FINISHED;
    };
}

public void performDailyJob() throws Exception {
    jobLauncher.run(statVideoJob, new JobParametersBuilder().addLong("time", System.currentTimeMillis()).toJobParameters());
    jobLauncher.run(statAdJob, new JobParametersBuilder().addLong("time", System.currentTimeMillis() + 1).toJobParameters());
		// ...job들
}

소요 시간

• 자세한 로그

결과

⌛총 실행 시간 : 2분 8초 848밀리초 (128848ms) 소요

2. Chunk 기반 순차 처리