Airflow 자습서를 온라인으로 찾아보면 대부분 Airflow가 무엇인지에 대한 훌륭한 소개를 제공합니다. 그들은 ETL의 개념, DAG가 무엇인지, 첫 번째 DAG를 구축하고 이를 실행하는 방법을 보여줄 것입니다. 자주 건너뛰는 것은 DAG의 작업이 데이터를 교환하는 방법입니다.
이 문서에서는 Airflow가 무엇이며 어떻게 작동하는지 최소한 기본적으로 이해하고 있다고 가정합니다.
Airflow 자습서를 온라인으로 찾아보면 대부분 Airflow가 무엇인지에 대한 훌륭한 소개를 제공합니다. 그들은 ETL의 개념, DAG가 무엇인지, 첫 번째 DAG를 구축하고 이를 실행하는 방법을 보여줄 것입니다.
자주 건너뛰는 것은 이러한 작업이 데이터를 교환하는 방법입니다.
작업을 빌드하는 동안 염두에 두어야 할 한 가지는 작업이 멱등원이어야 한다는 것을 기억하는 것입니다. 우리의 경우를 단순화하면 유사한 입력 매개변수로 실행이 성공하면 호출 횟수에 관계없이 동일한 결과를 생성한다는 의미입니다. 이것은 작업 입력/출력과 결합될 때 항상 명확하지 않을 수 있습니다.

#airflow #데이터 교환 #파이썬

로데이터사이언스닷컴

Airflow - 작업 간 데이터 공유

이 문서에서는 Airflow가 무엇이며 어떻게 작동하는지 최소한 기본적으로 이해하고 있다고 가정합니다.