今年我因緣際會,得到一個在start up 中建構RTB(Real Time Bidding)的廣告即時競標系統的職位。
而我藉著各種雲端服務的幫助,建構了一套系統對廣告做競標、收集數據、整理數據、與建構機器學習模型。我希望藉著這個機會,記錄今年的收穫。
今年我因緣際會,得到一個在start up 中建構RTB(Real Time Bidding)的廣告即時競標系統的職位。憑藉著過去的經驗,我一直很期待能依照自己...
我在剛開始工作時,公司讓一名很忙的工程師與我搭配。主管說:「你就開需求,看要收集什麼資料,讓工程師來收集吧!」 這是很標準的工程面的想法:確定需求、開發、驗收。...
在專案進行中,我們需要決定資料格式。 一開始,我們採用json作為資料的傳輸格式。主因是我們串接的SSP也都是使用json作為資料交換的格式,另一個主因則是我們...
在專案的開始,我們選擇json作為資料的格式後,慢慢的也體驗到這個選擇的問題了。 在其他工具上的效能問題 json雖然在nodejs上非常方便,讀取與寫入的效能...
前面兩篇以系統的觀點分享數據系統儲存與傳輸資料的格式。今天我想分享我對數據分析所使用的格式的看法。 以系統的觀點,資料很自然的是一筆一筆做處理的。這是因為系統在...
數據分析已經是一個悠久的需求,也因此對於數據分析所需的需求,其實也有很多解法了。分析可以分成已知需求的分析與未知需求的分析。前者常常被分類到BI的範疇,而後者則...
之前我分享了對於一般線上系統與分析系統對於資料的不同需求,並且針對他們不同的需求,提出我個人認為,在工程資源有限時比較好的選擇。接下來我想拿機器學習系統的需求與...