Airflow + unittest + decorator + partial function
Airflow 是管理排程的工具,目前是用來管理大部分的 Batch ETL 程式。Airflow 的特色就是所有排程和設定都必須透過程式碼,壞處就是沒辦法在 UI 上做任何設定,好處就是所有設定都會跟著程式碼做對應版本控管。所以不管是控制命令還是 SQL 全部都是程式碼控制。
看得到用不到的 MySQL connector