gc/snp-batch-validation
7
0
포크 0
코드 이슈 8 풀 리퀘스트 Actions 위키 활동

feat(shipdetail): 선박제원정보 수집 배치 작업 병렬화 및 최적화 #70

병합
HYOJIN feature/ISSUE-64-ship-batch-parallel-optimization 에서 develop 로 2 commits 를 머지했습니다 2026-03-20 16:26:24 +09:00
대화 0 커밋 2 파일 변경됨 13 +446 -140
HYOJIN 코멘트됨, 2026-03-20 16:25:14 +09:00
소유자
Copy Link

변경 사항

추가

  • IMO 목록을 N개 파티션으로 분할하여 병렬 API 호출 (Partitioned Step)
  • ShipDetailImoFetchTasklet: IMO 목록 조회 단계를 독립 Tasklet으로 분리
  • ShipDetailPartitioner: IMO 목록을 설정된 파티션 수로 균등 분할
  • batchPartitionExecutor: 배치 파티션 전용 TaskExecutor (core=4, max=8)
  • partition-count 설정 외부화 (dev:2, prod:4)

변경

  • sourceStepExecutionId → sourceJobExecutionId 마이그레이션 (7개 파일)
  • Job 흐름: ImoFetchStep → imoCountDecider → PartitionedStep → LastExecutionUpdateStep

수정

  • afterFetch 중복 실행으로 인한 실패 레코드 중복 INSERT 방지 (afterFetchCompleted 플래그)

관련 이슈

테스트

  • 빌드 성공 확인
  • 정규 수집 스케줄링 2일 테스트 완료
  • 재수집 프로세스 검증
## 변경 사항 ### 추가 - IMO 목록을 N개 파티션으로 분할하여 병렬 API 호출 (Partitioned Step) - `ShipDetailImoFetchTasklet`: IMO 목록 조회 단계를 독립 Tasklet으로 분리 - `ShipDetailPartitioner`: IMO 목록을 설정된 파티션 수로 균등 분할 - `batchPartitionExecutor`: 배치 파티션 전용 TaskExecutor (core=4, max=8) - `partition-count` 설정 외부화 (dev:2, prod:4) ### 변경 - `sourceStepExecutionId` → `sourceJobExecutionId` 마이그레이션 (7개 파일) - Job 흐름: ImoFetchStep → imoCountDecider → PartitionedStep → LastExecutionUpdateStep ### 수정 - afterFetch 중복 실행으로 인한 실패 레코드 중복 INSERT 방지 (`afterFetchCompleted` 플래그) ## 관련 이슈 - closes #64 ## 테스트 - [x] 빌드 성공 확인 - [x] 정규 수집 스케줄링 2일 테스트 완료 - [ ] 재수집 프로세스 검증
HYOJIN added 2 commits 2026-03-20 16:25:14 +09:00 
- IMO 목록을 N개 파티션으로 분할하여 병렬 API 호출
- ImoFetchTasklet으로 IMO 조회 단계 분리
- sourceStepExecutionId → sourceJobExecutionId 마이그레이션
- afterFetch 중복 실행 방지 플래그 추가
- partition-count 설정 외부화 (dev:2, prod:4)
claude-bot 이 변경사항을 승인하였습니다. 2026-03-20 16:26:24 +09:00
claude-bot left a comment
멤버
Copy Link

MR 승인 (via /mr skill)

MR 승인 (via /mr skill)
HYOJIN merged commit 859d290164 into develop 2026-03-20 16:26:24 +09:00
HYOJIN 삭제된 브랜치 feature/ISSUE-64-ship-batch-parallel-optimization 2026-03-20 16:26:24 +09:00
"로그인하여 이 대화에 참여"
리뷰어
No reviewers
claude-bot
레이블
레이블 초기화
No items
레이블 없음
마일스톤
마일스톤 초기화
No items
마일스톤 없음
담당자
담당자 초기화
담당자 없음
참여자 2명
알림
마감일
기한이 올바르지 않거나 범위를 벗어났습니다. 'yyyy-mm-dd'형식을 사용해주십시오.

마감일이 설정되지 않았습니다.

의존성

No dependencies set.

Reference: gc/snp-batch-validation#70
No description provided.
Delete Branch "feature/ISSUE-64-ship-batch-parallel-optimization"

Deleting a branch is permanent. Although the deleted branch may continue to exist for a short time before it actually gets removed, it CANNOT be undone in most cases. Continue?