[Tool]/[Airflow] (2) 썸네일형 리스트형 [Airflow] Airflow Trigger Rules Airflow Trigger Ruleshttps://airflow.apache.org/docs/apache-airflow/1.10.9/concepts.html#trigger-rules Concepts — Airflow Documentation airflow.apache.org상위 task 여러 개가 하나의 하위 task로 연결되는 구조에서 하위 task의 실행 조건을 설정하는 방법이다. trigger_rule 종류all_success(기본값)상위 Task가 모두 성공하면 실행all_failed상위 Task가 모두 실패하면 실행all_done상위 Task가 모두 수행되면 실행(실패해도 수행된 것에 포함)all_skipped상위 Task가 모두 Skipped 상태면 실행one_failed상위 Task 중 하.. [Airflow] Airflow 개념 Apache Airflow Apache Airflow 공식문서 What is Airflow™? — Airflow Documentation airflow.apache.org Airflow는 AirBnB( Air Bed and Breakfast)에서 만든 워크플로우 관리 도구(Workflow management tool)이다. ETL(Extraction -> Transformation -> Loading)과 같이 작업의 흐름을 관리할 수 있는 툴이다. 워크플로우 작성, 스케줄링, 모니터링 작업을 관리하고 시각화할 수 있다. Airflow는 이러한 관리를 위한 컴포넌트(Component)들이 있으며, 각 컴포넌트들 간의 아키텍처는 아래와 같다. Airflow 구성요소 Webserver UI를 통해 사용자에게 .. 이전 1 다음
