iT邦幫忙

dbt相關文章
共有 100 則文章
鐵人賽 AI & Data DAY 30

技術 機器學習 挑戰 - Day 9 (完) + 完賽感想

續上一篇機器學習 挑戰 - Day 8 我想使用最後一篇文章來回顧我在第0天的原始計劃以及實際所做的事情。 回報時間框架: 日內交易(每日)- 我主要關注每日...

鐵人賽 AI & Data DAY 30

技術 總結 30 個 Tips + 未來展望 - Day 30

這是最後一篇 🎬 !從 Day 1 的好奇心開始,到 Day 7 我開始談如何建構 Data Team, 一路到 Day 25 才開始介紹社群。這 30 天的文...

鐵人賽 AI & Data DAY 30

技術 DAY 30 - Analytics Engineer 是什麼職位 + 我的職涯故事

今天我想要分享我過去擔任 data 相關職位的一點心得。先簡單分享我的職涯故事,後面會介紹 Analytics Engineer 這個職位。 我的職涯故事 2...

鐵人賽 AI & Data DAY 29

技術 資料合約(Data Contracts)101:2 實踐參考

實踐架構 瞭解了資料合約的定義以後,有很多人的反應是“感覺很簡單,為什麼沒有/不直接執行呢?“。在軟體工程領域裡將API資料結構協議化與嚴格執行已經是行之有年的...

鐵人賽 AI & Data DAY 29

技術 機器學習 挑戰 - Day 8

續上一篇機器學習 挑戰 - Day 7 scikit-learn - 用於構建分類器的最基本的機器學習算法這是 Python 中最廣為人知的機器學習模組,主要用...

鐵人賽 AI & Data DAY 29

技術 DAY 29 - Taipei dbt Meetup & 在地社群

Taipei dbt Meetup 是由 Karen, Laurence, 和 Allen 帶頭開始的,當時台灣還很少人用過 dbt。因為他們在 Slack 申...

鐵人賽 AI & Data DAY 29

技術 在 dbt 社群找到志同道合的朋友 - Day 29

在 Day 4, 我談到為何選擇 dbt, 今天想來反向聊一下,那 dbt 為何選擇我這種,從 PM 轉進資料人。在 Day 24 也有聊到,dbt 的誕生是為...

鐵人賽 AI & Data DAY 28

技術 資料合約(Data Contracts)101:1 簡介

定義 資料合約最近幾年才出現在資料領域(儘管與手機流量合約和加密貨幣的智能合約有點混淆),然而,其背後的概念和用法並不新穎。這個概念的開發或多或少是一種對大數據...

鐵人賽 AI & Data DAY 28

技術 DAY 28 - dbt官方文件、影片、學習資源

附上一些我常用的官方資源。 除了官網之外,也推薦: 加入 Slack 社群:目前有 50000+ 人,任何資料庫、BI 工具、在地社群(城市)都可以有一個自己...

鐵人賽 AI & Data DAY 28

技術 機器學習 挑戰 - Day 7

續上一篇機器學習 挑戰 - Day 6 我想要研究一下可否加入多項其他變數來預測未來價格。 在尋找資料時,意外發現有Pytrend這個API可導入。什麼是 P...

鐵人賽 AI & Data DAY 28

技術 你也可以帶領社群 - Day 28

從 Day 25 我開始推薦社群,在 Day 26 跟 Day 27 分別建議如何參與,今天想邀請你更進一步。不知道你有沒有想過,其實每個人都可以領導社群,在社...

鐵人賽 AI & Data DAY 27

技術 機器學習 挑戰 - Day 6

續上一篇機器學習 挑戰 - Day 5,我們今天繼續詳細研究一下如何套用 tensorflow.keras.sequential 來預測BTC的價格。 我想嘗試...

鐵人賽 AI & Data DAY 27

技術 開源項目商業化:3 dbt 商業化案例分析(2)

dbt 商業模式轉向 近年來,dbt Labs內部應該是了解到了這個問題,而看似是有意識的轉移dbt Cloud的商業定位。最明顯的應該是他們的商業模式改變,從...

鐵人賽 AI & Data DAY 27

技術 你的經驗值得分享 - Day 27

希望你有被上一篇文章 📖 說服去加入社群。今天,我想討論分享的力量。dbt Taipei Meetup 目前為止已舉辦 15 次 Meetup, 每次至少有 2...

鐵人賽 AI & Data DAY 27

技術 DAY 27 - 小故事: 當初如何決定要用dbt

2022年5月:第一次聽到dbt 第一次是在 Telegram 聽到 dbt。 當時我還在前一間公司 MDF Instruments,在群組 資料森友會 尋求建...

鐵人賽 AI & Data DAY 26

技術 機器學習 挑戰 - Day 5

續上一篇機器學習 挑戰 - Day 4,我們今天繼續詳細研究一下如何套用 tensorflow.keras.sequential 來預測BTC的價格。 首先,我...

鐵人賽 AI & Data DAY 26

技術 開源項目商業化:2 dbt 商業化案例分析

dbt Cloud vs Core 對於那些不熟悉 dbt 的人來說,它是「data build tool」的縮寫。顧名思義,dbt的主要使用案例是架構資料管道...

鐵人賽 AI & Data DAY 26

技術 如何玩 😄社群 - Day 26

昨天提到要開始寫新章節 📖:社群。這對生活及職涯都很重要,要用力推薦 💪。雖然參加社群都很簡單,就是報名一場活動或加入 Slack 或 FB, 但離真的「參與」...

鐵人賽 AI & Data DAY 26

技術 DAY 26 - dbt Core 入門 (4) - 用 GitHub Actions 建立排程

在 DAY 07 我們曾討論過在 dbt Cloud 要如何建立定時排程。那麼如果我們用的是 dbt Core,該怎麼做呢? 許多團隊會使用 Airflow,...

鐵人賽 AI & Data DAY 25

技術 開源項目商業化:1 開源商業模式簡介

開源軟體商業化模式 對許多人來說,“開源軟體”(Open Source Software)可能讓人聯想到網路初期那些充滿熱情的駭客和程式設計師,與這些人對網路烏...

鐵人賽 AI & Data DAY 25

技術 機器學習 挑戰 - Day 4

續上一篇機器學習 挑戰 - Day 3,我們今天要詳細研究一下如何套用 tensorflow.keras.models的LSTM 來預測BTC的價格。 在應用t...

鐵人賽 AI & Data DAY 25

技術 為什麼你需要加入資料社群? - Day 25

昨天我提到會開啟新章節,來聊一下社群吧。我是在 2020 年加入 dbt Slack 社群,就像多人一樣只潛水,會去看別人的討論但不太敢參與。一直到 2022...

鐵人賽 AI & Data DAY 25

技術 DAY 25 - dbt Core 入門 (3) - dbt Power User

昨天聊了 dbt Core 在本機開發的基本操作,但和 dbt Cloud 相比起來,還是麻煩很多。 今天要來介紹一個常用的 VS Code extension...

鐵人賽 AI & Data DAY 24

技術 Reverse ETL & C-CDP:活化你的資料倉庫 Part 6

激活層資料模型範例(續) 淺談360資料模型 在激活層內最常用到的資料模型通常是某種360模型。顧名思義,360資料模型基本上就是一個實體的360 度視圖,目標...

鐵人賽 AI & Data DAY 24

技術 機器學習 挑戰 - Day 3

續上一篇機器學習 挑戰 - Day 2,我們今天繼續詳細研究一下如何套用 ARIMA 來預測BTC的價格。 Auto-Regressive Integrated...

鐵人賽 AI & Data DAY 24

技術 DAY 24 - dbt Core 入門 (2) - 在本機開發的基本操作

今天要在聊 dbt Core 如何執行基本的 dbt 操作。在本機的 VS Code 或其他 IDE 開發,與 dbt Cloud 不同,沒有瀏覽器的 GUI...

鐵人賽 AI & Data DAY 24

技術 師法軟體工程師的工作方式 - Day 24

這系列文從 Day 1 開始,我介紹最近幾年從 PM 踏入資料領域的經驗。dbt 非常適合給像我這種非技術背景的資料人使用,且提供使用的心態。dbt 是 Tri...

鐵人賽 AI & Data DAY 23

技術 Reverse ETL & C-CDP:活化你的資料倉庫 Part 5

激活層資料模型範例 用一個比較簡單的與常見的使用案例來做範例,假設某一個公司的商業模型如下: 客戶獲取(Customer Acquisition)和客戶引導(...

鐵人賽 AI & Data DAY 23

技術 機器學習 挑戰 - Day 2

續上一篇機器學習 挑戰 - Day 1,我們今天要來詳細研究一下如何套用machine learning module 來預測BTC的價格。 首先想要研究的是A...

鐵人賽 AI & Data DAY 23

技術 DAY 23 - dbt Core 入門 (1) - 設定本機環境

相對於 dbt Cloud 為 dbt Labs 提供的 SaaS solution,dbt Core 為 free open source solution,...