반응형

BashOperator 2

[Airflow] 3. Operator 완전 정복 - 다양한 작업 유형별 활용법

안녕하세요, 데이터 탐험가 여러분! 팬돌프입니다. 🐧지난 2편에서는 우리 손으로 직접 Airflow를 설치하고 첫 번째 DAG를 만들어보는 뿌듯한 경험을 했습니다. 이제 Airflow가 어떻게 돌아가는지 감을 잡으셨을 텐데요. 오늘은 데이터 파이프라인에 실질적인 생명을 불어넣는 아주 중요한 요소, 바로 오퍼레이터(Operator)에 대해 깊이 있게 파헤쳐 보겠습니다!Airflow가 강력한 이유는 바로 이 오퍼레이터 덕분입니다. 세상에 존재하는 거의 모든 종류의 작업을 수행할 수 있도록 미리 만들어진 '작업 블록'이라고 생각하시면 됩니다. 자, 그럼 어떤 마법 같은 블록들이 있는지 함께 탐험해 볼까요?3편: Operator 완전 정복 - 다양한 작업 유형별 활용법오퍼레이터는 Airflow의 핵심 빌딩 블..

[Airflow] 2. Airflow 설치부터 첫 DAG까지 - 실습으로 배우는 기초

안녕하세요, IT 탐험가 팬돌프입니다! 🐧 지난 1편: Apache Airflow 완전 정복에서는 Airflow의 기본 개념과 아키텍처, 그리고 실제 기업 활용 사례까지 알아보았는데요. 많은 분들이 데이터 파이프라인의 새로운 가능성을 보셨을 거라 생각합니다.이론으로 기본기를 다졌으니, 이제 직접 우리 손으로 Airflow를 움직여 볼 시간입니다! 오늘은 Airflow를 직접 설치하고, 생애 첫 데이터 파이프라인(DAG)을 만들어보는 설레는 실습을 진행하겠습니다. 조금 복잡해 보일 수 있지만, 제가 하나하나 차근차근 안내해 드릴 테니 걱정 말고 따라오세요!2편: Airflow 설치부터 첫 DAG까지 - 실습으로 배우는 기초🛠️ 설치 및 환경 구성 Airflow를 설치하는 방법은 여러 가지가 있지만, 오..

반응형