Top Stories published by A multi hyphen life in March of 2020

[Data] Data Pipeline 101(二) — Stage 和 Job

前人種樹後人乘涼

如果把 Data Pipeline 是資料處理系統的總稱,這個系統中的最小單位是 Stage/ Task,一個或多個 Stage/ Task 會組成一條基本的處理資料的 Job。有了這個基本認知後,再接下來細看每個東西是在幹嘛的。

Stage/ Task

About
A multi hyphen life
Data Engineer/ Coach/ Coffee Engineer/Life hacker
More information
Tags
Editors