티스토리 뷰

반응형

1. 배치 핵심패턴 

  • [Extract]      :  Read 패턴 - 데이터 베이스, 파일, 큐에서 다량의 데이터 조회
  • [Transform]  : Process 패턴 - 특정 방법으로 데이터를 가공
  • [Load]         : Write 패턴 - 데이터를 수정된 양식으로 다시 저장 

2. 배치 시나리오

  • 배치 프로세스를 진행하면서 데이터들을 쪼개서 저장할 수 있어야 한다.
  • 동시 다발적인 Job의 배치 처리, 대용량 병렬처리가 가능해야 한다. 
  • 실패 후 수동 또는 스케줄링에 의해 재시작 될 수 있어야 한다.
  • 의존관계가 있는 step 여러개를 순차적으로 처리 할 수 있어야 한다.
  • 조건적 Flow 구성을 통한 체계적이고 유연한 배치 모델을 구성할 수 있어야 한다.
  • 배치는 반복적으로 실행되도 괜찮아야하고, 재시도 할 수 있어야 하며, 일부 예외 케이스는 Skip할 수 있어야 한다.  

3. 아키텍처 

  • Application 
    • 스프링 배치 프레임워크를 통해 개발자가 만든 모든 배치 Job 과 커스텀 코드를 포함
    • 개발자는 업무로직의 구현에만 집중할 수 있게 공통적인 기반기술은 프레임웍이 담당하게 한다.
  • Batch Core
    • Job을 실행, 모니터링, 관리하는 API로 구성되어 있다.
    • JobLauncher, Job, Step, Flow등이 속한다.
  • Batch Infrastructure
    • Application, Core 모두 공통 Infrastructure 위에서 빌드된다.
    • Job실행의 흐름과 처리를 위한 툴을 제공한다.

 

 

반응형
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
Total
Today
Yesterday
링크
«   2025/05   »
1 2 3
4 5 6 7 8 9 10
11 12 13 14 15 16 17
18 19 20 21 22 23 24
25 26 27 28 29 30 31
글 보관함