데이터 파이프라인
배치·스트림 통합 오케스트레이션
Airflow와 이벤트 트리거를 연결해 하이브리드 워크플로를 운영합니다.
참고 가격 2,600,000 원 (정보 제공 목적이며 현장 결제는 별도 안내)
설명
일 단위 배치와 실시간 보정 잡이 충돌하지 않도록 스케줄·의존성·SLA를 정리합니다. 실패 재시도 정책을 데이터 계약과 맞춥니다.
포함 기능
- DAG 설계 패턴
- 이벤트 기반 트리거
- 데이터 계약 테스트
- 실패 알람 그룹
- 리소스 큐 관리
- 문서화 자동화
기대 결과
- 하이브리드 DAG 예시
- 데이터 계약 테스트 1종
- 알람 그룹 표
FAQ
Airflow 버전은?
2.8 기준 예시이며 개념은 이전 버전에도 적용됩니다.
Spark 포함인가요?
연동 지점만 다루며 Spark 튜닝은 포함하지 않습니다.
한계는?
대규모 클러스터 성능 튜닝은 범위 밖입니다.
코호트 후기
이벤트 트리거 모듈이 현업과 가깝습니다.
과제량이 많아 주말이 필요했지만 피드백이 빨랐습니다.