CASE · 자동화
브랜드 상품정보 대량 수집 시스템
수십 개 브랜드 상품 · 가격을 차단 없이 자동 수집
PROBLEM문제
수십 개 브랜드의 상품 · 가격 정보는 사람이 확인하기엔 양이 많고, 수집 차단으로 중간에 자주 끊겼습니다.
SOLUTION해결
브랜드별 독립 수집 모듈과 대시보드를 만들고, 차단을 감지하면 요청 간격을 자동 조절하는 방식과 실패 건 추적 · 재수집 기능을 적용했습니다.
- 브랜드별 수집 모듈
- 적응형 요청 간격 제어
- 실패 건 추적 · 재수집
- 브랜드별 대시보드
RESULT결과
- 차단으로 멈추지 않고 수집 지속
- 실패 건이 데이터로 남아 재수집 가능