Data Engineering/Airflow
[Airflow] Airflow Task log 작성 (feat. logging)
Airflow Task log 작성 (feat. logging)Airflow는 로그를 작성하기 위해 Python의 logging 모듈을 사용한다. Airflow에서 logging 모듈을 어떻게 사용하고 있으며, 이를 활용해 Airflow Task의 log를 작성하는 방법을 알아볼 것이다.Python logging 공식 문서logging 모듈과 Airflowlogging 내부에 존재하는 Class는 총 4개 (Logger, Handler, Filter, Formatter)가 있다. 이에 대한 설명과 함께 Airflow에서는 해당 Class를 활용할 수 있는지 알아본다.import logginglogging의 내부 Classlogging.Logger (로거)애플리케이션 코드가 직접 상호 작용하는 인터페이스,..
