3LexWApache Airflow 2.1 基礎教學(4):用 Dynamic DAG 極量減低轉型工作量幾百份腳本 != 幾百份 DAG!只需要一個 Python 檔跟一個 CSV 檔,就可以輕易將幾百份 Shell Script 轉托給 Airflow 管理。Jul 15, 2021Jul 15, 2021
3LexWApache Airflow 2.1 基礎教學(3):用 SSH 連結一切,再加點 Operator就算 Apache Airflow 多麼吸引,在既有的腳本運行良好的情況下,貿然開發仍會令人卻步。但利用 SSH,就可以避免在改動原有的腳本上,享受 Apache Airflow 集中管理腳本的便利。Jul 10, 2021Jul 10, 2021
3LexWApache Airflow 2.1 基礎教學(2):安裝及基礎設定心動不如行動,在這篇文章中,我們來介紹如何在 RHEL(CentOS)上安裝 Airflow,並建立起基本架構,也會提供離線安裝方案。Jul 10, 2021Jul 10, 2021
3LexWApache Airflow 2.1 基礎教學(1):從超量 cron job 排程工作轉守為攻幾百個 cron job 分散各處,每天收幾百封電郵,營運人員根本就看不完。難道我們就只能被動等待回報嗎?這篇文章簡單介紹開源軟件 Apache Airflow,嘗試讓企業轉守為攻,把 cron job 集中管理起來吧!Jul 10, 2021Jul 10, 2021