iT邦幫忙

鐵人檔案

2023 iThome 鐵人賽
回列表
AI & Data

dbt: 告別過時的SQL開發流程 系列

這幾年我一直從事以SQL為主的data工作,想改良現有的資料流程,卻不知如何下手。直到認識了dbt,才看到一線曙光。如果你也和過去的我一樣,在data之路感到迷惘,希望本系列文章能對你有幫助。

鐵人鍊成 | 共 30 篇文章 | 22 人訂閱 訂閱系列文 RSS系列文 團隊dbt 和 dbt 以外有趣的事
DAY 21

DAY 21 - dbt 中階 (8) - 專案架構及命名原則

如同軟體開發領域,Best Practices 雖是多數人所認同的大方向,但卻非適用所有情境,且隨時在進化,沒有永久適用的通則。 今天我想分享的是我從使用 db...

2023-10-06 ‧ 由 Stacy Lo 分享
DAY 22

DAY 22 - dbt 中階 (9) - 排程規劃 & Tags

昨日 DAY 21 所討論的專案架構,可能也和我們日常更新的排程規劃有關。 依資料來源系統更新 在 DAY 12 時有提過,我們在執行 dbt run 或是...

2023-10-07 ‧ 由 Stacy Lo 分享
DAY 23

DAY 23 - dbt Core 入門 (1) - 設定本機環境

相對於 dbt Cloud 為 dbt Labs 提供的 SaaS solution,dbt Core 為 free open source solution,...

2023-10-08 ‧ 由 Stacy Lo 分享
DAY 24

DAY 24 - dbt Core 入門 (2) - 在本機開發的基本操作

今天要在聊 dbt Core 如何執行基本的 dbt 操作。在本機的 VS Code 或其他 IDE 開發,與 dbt Cloud 不同,沒有瀏覽器的 GUI...

2023-10-09 ‧ 由 Stacy Lo 分享
DAY 25

DAY 25 - dbt Core 入門 (3) - dbt Power User

昨天聊了 dbt Core 在本機開發的基本操作,但和 dbt Cloud 相比起來,還是麻煩很多。 今天要來介紹一個常用的 VS Code extension...

2023-10-10 ‧ 由 Stacy Lo 分享
DAY 26

DAY 26 - dbt Core 入門 (4) - 用 GitHub Actions 建立排程

在 DAY 07 我們曾討論過在 dbt Cloud 要如何建立定時排程。那麼如果我們用的是 dbt Core,該怎麼做呢? 許多團隊會使用 Airflow,...

2023-10-11 ‧ 由 Stacy Lo 分享
DAY 27

DAY 27 - 小故事: 當初如何決定要用dbt

2022年5月:第一次聽到dbt 第一次是在 Telegram 聽到 dbt。 當時我還在前一間公司 MDF Instruments,在群組 資料森友會 尋求建...

2023-10-12 ‧ 由 Stacy Lo 分享
DAY 28

DAY 28 - dbt官方文件、影片、學習資源

附上一些我常用的官方資源。 除了官網之外,也推薦: 加入 Slack 社群:目前有 50000+ 人,任何資料庫、BI 工具、在地社群(城市)都可以有一個自己...

2023-10-13 ‧ 由 Stacy Lo 分享
DAY 29

DAY 29 - Taipei dbt Meetup & 在地社群

Taipei dbt Meetup 是由 Karen, Laurence, 和 Allen 帶頭開始的,當時台灣還很少人用過 dbt。因為他們在 Slack 申...

2023-10-14 ‧ 由 Stacy Lo 分享
DAY 30

DAY 30 - Analytics Engineer 是什麼職位 + 我的職涯故事

今天我想要分享我過去擔任 data 相關職位的一點心得。先簡單分享我的職涯故事,後面會介紹 Analytics Engineer 這個職位。 我的職涯故事 2...

2023-10-15 ‧ 由 Stacy Lo 分享