data-pipeline 15
- LLM 대기 중 DB 연결을 닫고 결과 발행 권한을 확인하기
- Airflow 전환에서 재접속과 재실행 보류를 선택한 이유
- Airflow 구성 방식과 AWS 배포 방식 비교
- Airflow DAG와 실행 모델
- Kafka의 토픽·파티션·컨슈머 그룹
- EDGE 데이터 파이프라인 아키텍처
- 데이터 파이프라인의 단계별 관측과 운영 조회 API
- 장중 파이프라인의 Transactional Outbox와 멱등 처리
- 프로메테우스와 그라파나의 역할과 모니터링 흐름
- FMP·BigKinds 뉴스 수집과 raw 적재 설계
- KR ETF 구성종목 수집과 인증·기준일 관리
- Python 워커와 ECS Task로 구성한 일 배치 파이프라인
- 메달리온 아키텍처의 Bronze·Silver·Gold 역할
- 데이터 파이프라인에서 RDB와 S3를 나누는 기준
- EDGE 데이터 파이프라인 개발 계획