第 11 屆 iThome 鐵人賽
分享至
個個資料該怎麼處理、怎麼安排,影像、文字、表格...等等雜亂混雜的數據海該如何妥善的抽離、轉化成我們所需的模樣,這時就如同配管線一般,一一將數據做正確的導引和延伸,針對數據(Data)的管線(Pipeline)配置~
BigQuery汲取數據、CloudDataflow轉換數據、CloudStorage存數據,這就是用建構Data pipeline的架構
IT邦幫忙