Apache Airflow

에어플로우

8개 레벨

데이터 파이프라인을 자동화하는 도구예요. 다양한 작업을 순차적으로 관리하고 모니터링할 수 있어요. 사용자가 쉽게 작업 흐름을 정의할 수 있도록 돕는 기능이 있어요.

공식 웹사이트

에어플로우 스킬 여정을 시작하세요

8개의 레벨을 통해 체계적으로 학습하고, 커리어 성장의 기반을 다지세요.

8 레벨 로드맵

단계별 역량 인증

학습 로드맵

8개 레벨

전체 8

Lv 1. Airflow의 개념과 설치 과정을 알아요

1. Apache Airflow 개요
2. Airflow 아키텍처
3. 환경 설정
4. Airflow 설치

연습 문제

1.
airflow.cfg를 수정해 executor를 LocalExecutor로 변경하기
2.
로컬 또는 Docker 환경에 Airflow 설치 후 웹 UI 접속해보기

Lv 2. 기본 DAG와 Operator를 작성할 수 있어요

Lv 3. Connection, Variable, Pool을 활용할 수 있어요

Lv 4. XCom과 분기 로직을 구현할 수 있어요

로그인하고 더 많은 레벨을 확인하세요

Lv 5. 로그와 SLA를 설정하여 안정성을 높일 수 있어요

Lv 6. Prometheus와 Grafana로 모니터링 대시보드를 구축할 수 있어요

Lv 7. 실제 서비스 환경에 배포할 수 있어요

Lv 8. 테스트와 CI/CD로 안정적 배포 프로세스를 구축할 수 있어요

이 스킬로 지원할 수 있는 채용공고