GCP 환경에서의 Airflow Celery Executor 구축 및 운영 파이프라인
GCP 환경에서의 Airflow Celery Executor 구축 및 운영 파이프라인 본 포스팅에서는 Google Cloud Platform(GCP) 환경에서 Airflow Celery Executor 아키텍처를 구축한 과정을 공유합니다. Terraform을 이용한 인프라 프로비저닝부터 Airflow 설정, Systemd를 통한 프로세스 관리, 그리고 Cloud Build를 활용한 배포 자동화까지 전체적인 엔지니어링 파이프라인을 다룹니다. 1. 아키텍처 개요: 왜 Celery Executor인가? Airflow는 […]
