1. Spring Batch 알아보기
1편

2. Batch 프로그램이란
• 일련의 작업들을 하나의 작업 단위로 묶어
연속적으로 일괄 처리하는 것
특징
• 사용자와의 상호작용 없이
• 일련의 작업들을 묶어
• 대량의 데이터를 처리하는
• 정기적으로 반복 수행하거나
• 정해진 규칙에 따라 자동으로 수행

3. Spring Batch 백그라운드
기존 Java 기반 배치 처리 아키텍처 프레임워크에 기술 부재
자사 소유의 배치 아키텍처
및 기술적 노하우 기증
깊이 있는 기술 경험과
스프링 프로그래밍 모델 제공

4. Spring Batch 특징
• 대량의 데이터를 일괄처리하는데 특화
• Spring Batch는 스케줄링 프레임워크가 아니다.
스케줄러와 함께 작동하도록 설계됐다.
• 로깅 및 추적, 트랜잭션 관리, 작업 처리 통계, 작업 재시작,
건너뛰기 및 리소스 관리를 포함하여 대량의 레코드를
처리하는 데 필수적인 재사용 가능한 기능을 제공
• 최적화 및 파티셔닝 기술을 통해 매우 높은 볼륨 및 고성능
배치 작업을 가능하게 하는 고급 기술 서비스 및 기능을 제공

5. Spring Batch 비즈니스 시나리오
• 배치 프로세스를 주기적으로 커밋
• 동시 다발적인 Job 의 배치 처리, 대용량 병렬 처리
• 실패 후 수동 또는 스케줄링에 의한 재시작
• 의존관계가 있는 step 여러 개를 순차적으로 처리
• 조건적 Flow 구성을 통한 체계적이고 유연한 배치 모델 구성
• 반복, 재시도, Skip 처리

6. Spring Batch 도메인 이해

7. Spring Batch 메타데이터 스키마

8. Spring Batch 메타데이터 스키마
JOB 관련 테이블
BATCH_JOB_INSTANCE
• Job이 실행될 때 JobInstance 정보가 저장.
• job_name과 job_key를 키로 하나의 데이터가
저장
BATCH_JOB_EXECUTION
• Job의 실행정보가 저장되며 Job생성/시작/종료
시간, 실행상태, 메시지 등을 관리
BATCH_JOB_EXECUTION_PARAMS
• Job과 함께 실행되는 JobParameter 정보를 저장
BATCH_JOB_EXECUTION_CONTEXT
• Job 실행동안의 여러가지 상태정보, 공유
데이터를 직렬화 (Json 형식)하여 저장
• Step 간 서로 공유 가능함

9. Spring Batch 메타데이터 스키마
STEP 관련 테이블
BATCH_STEP_EXECUTION
• Step의 실행정보가 저장
• 생성, 시작, 종료 시간, 실행상태, 메시지 등을
관리
BATCH_STEP_EXECUTION_CONTEXT
• Step 의 실행동안 여러가지 상태정보, 공유
데이터를 직렬화 (Json 형식) 해서 저장
• Step 별로 저장되며 Step 간 서로 공유할 수
없음

10. 요약
• Accenture가 기증하여 SpringSource과 협력으로 탄생
• 대량의 데이터를 처리하는데 특화
• 배치가 실패하더라도 강력한 retry 기능 제공
• 메타데이터 저장을 위한 스키마 존재
• Job, Step, Tasklet이라는 도매인으로 구성

11. Job의 구성
• Job
• JobInstance
• JobParameters
• JobExecution

12. Spring Batch 도메인 Job
• 배치 계층 구조에서 가장 상위에 있는 개념으로서 하나의 배치작업 자체를 의미
• Job Configuration 을 통해 생성되는 객체 단위로서 배치작업을 어떻게 구성하고 실행할 것인지
전체적으로 설정하고 명세해 놓은 객체
• 배치 Job 을 구성하기 위한 최상위 인터페이스이며 스프링 배치가 기본 구현체를 제공
• 여러 Step 을 포함하고 있는 컨테이너로서 반드시 한 개 이상의 Step으로 구성해야 함

13. Spring Batch 도메인 Job

14. Spring Batch 도메인 JobInstance
• Job 이 실행될 때 생성되는 Job 의 논리적 실행 단위 객체로서 고유하게 식별 가능한 작업 실행을 나타냄
• Job 의 설정과 구성은 동일하지만 Job 이 실행되는 시점에 처리하는 내용은 다르기 때문에 Job 의 실행을 구분해야 함
• JobInstance 생성 및 실행
• 처음 시작하는 Job + JobParameter 일 경우 새로운 JobInstance 생성
• 이전과 동일한 Job + JobParameter 으로 실행 할 경우 이미 존재하는 JobInstance 리턴
• 내부적으로 JobName + jobKey (jobParametes의 해시값) 를 가지고 JobInstance 객체를 얻음
• Job 과는 1:M 관계
BATCH_JOB_INSTANCE 테이블과 매핑
• JOB_NAME (Job) 과 JOB_KEY (JobParameter 해시값) 가 동일한 데이터는 중복해서 저장할 수 없음

15. Spring Batch 도메인 JobInstance

16. Spring Batch 도메인 JobParameter
• Job을 실행할 때 함께 포함되어 사용되는 파라미터를 가진 도메인 객체
• 하나의 Job에 존재할 수 있는 여러개의 JobInstance를 구분하기 위한 용도
• JobParameters와 JobInstance는 1:1 관계
생성 및 바인딩
• 어플리케이션 실행 시 주입
• Java -jar LogBatch.jar requestDate=20210101
• 코드로 생성
• JobParameterBuilder, DefaultJobParametersConverter
• SpEL 이용
• @Value(“#{jobParameter[requestDate]}”), @JobScope, @StepScope 선언 필수

17. Spring Batch 도메인 JobParameter

18. Spring Batch 도메인 JobExecution
• JobInstance 에 대한 한번의 시도를 의미하는 객체로서 Job 실행 중에 발생한 정보들을 저장하고 있는 객체
• 시작시간, 종료시간, 상태(시작됨,완료,실패), 종료상태의 속성을 가짐
• JobIstance 과의 관계
• JobExecution은 'FAILED' 또는 'COMPLETED‘ 등의 Job의 실행 결과 상태를 가지고 있음
• JobExecution 의 실행 상태 결과가 'COMPLETED’ 면 JobInstance 실행이 완료된 것으로 간주해서 재 실행이 불가함
• JobExecution 의 실행 상태 결과가 'FAILED’ 면 JobInstance 실행이 완료되지 않은 것으로 간주해서 재실행이 가능함
• JobParameter 가 동일한 값으로 Job 을 실행할지라도 JobInstance 를 계속 실행할 수 있음
• JobExecution 의 실행 상태 결과가 'COMPLETED’ 될 때까지 하나의 JobInstance 내에서 여러 번의 시도가 생길 수 있음
BATCH_JOB_EXECUTION 테이블과 매핑
• JobInstance 와 JobExecution 는 1:M 의 관계로서 JobInstance 에 대한 성공/실패의 내역을 가지고 있음

19. Spring Batch 도메인 JobExecution

20. Spring Batch 도메인 JobExecution
출처: toptal

21. Spring Batch

22. Reference
인프런: 스프링 배치 - Spring Boot 기반으로 개발하는 Spring Batch