前幾個星期參加TWDS與dbt聯合舉辦的年末活動,其中幾位講者紛紛提到dbt對於資料分析和資料工程的影響,以及對於數據治理的概念。如果看過我在今年七月時的文章,會知道我對於dbt很有興趣,主要是我認為dbt似乎…
出乎意料的第二年
一個多月前,我在台大圖書館找到一本書,名為 “Data Engineering with dbt”。我一直對於資料工程(Data…
我是 Migo Data Engineer Team 的 Data Engineer Joshua,我們團隊使用 DBT 來進行數據 Transformation,且使用 BigQuery 作為資料倉儲,此篇文章是要介紹如何在 DBT 上管理 UDF。
大家一定覺得「Semantic layer,商業世界與資料世界溝通的橋樑」這句話似曾相似。在資料分析師、資料工程師這些職缺剛出來時,確實有這麼一句話:資料團隊是商業團隊以及工程團隊間的橋樑。