第 8 屆 IT 邦幫忙鐵人賽

Big Data

Big Data
30天學會Data Integration - Kettle 系列第 11 天

Step - 讀取Excel檔案

此篇將介紹如何讀取Excel檔案，請先找到這個Step，[input]Microsoft Excel Input，然後就開始新增Step吧！準備Excel檔案...

juben 於 2016-12-26 發表｜ 8503 次瀏覽
Big Data
從學生到職場：菜鳥資料科學家的第一個月系列第 3 天

資料科學的思考流程

思考流程資料科學的流程基本原則就是：「從資料開始，透過一連串的過程發現隱藏在資料中的規則，利用這些規則完成一些有趣的應用。」大致的流程會是：取得資料 -&g...

WeiYuan 於 2016-12-03 發表｜ 8498 次瀏覽
Big Data
我的資料科學之路系列第 9 天

[Day 09] 貝式派的統計推論

條件機率那我就先幫大家複習一下條件機率吧！條件機率是指在某些條件發生的前提之下，某件事發生的機率，其實人類觀察很多事物是用條件機率做判斷的，而非一般的機率。即...

杜岳華於 2016-12-24 發表｜ 8488 次瀏覽
Big Data
R語言與機器學習見面會系列第 12 天

Day12 R語言外部資料介面(Excel)

終於，程式猿用了6天(Day6-Day11)砍就了30天見面會的第二個主題:R語言基礎!我們曾使用過R的內建資料集(iris)作練習，不過在實戰中，資料集則多半...

StanleyJui 於 2016-12-12 發表｜ 8461 次瀏覽
Big Data
30天學會Data Integration - Kettle 系列第 7 天

執行Transformation

今天透過觀察範例檔案來了解如何執行Transformation，請開啟data-integration\samples\transformations\CSV...

juben 於 2016-12-22 發表｜ 8411 次瀏覽
Big Data
30天學會Data Integration - Kettle 系列第 14 天

Step - 字串組合與欄位調整

延續上一篇，此篇將繼續介紹如何將拆解的日期重新合併，接下來的操作會比較繁瑣，但如果都能跟得上的話，就代表你對Kettle的操作熟練度又更上一層樓囉！此篇會介紹到...

juben 於 2016-12-29 發表｜ 8263 次瀏覽
Big Data
30天之你好MongoDB 系列第 29 天

30-29之補充---忘了講的事務操作

黑色好看版 - 傳送門本篇文章是用來補充一下，前面忘了講的觀念，記得在第一篇時，我們有提過下面這句話。 MongoDB 不支持事務操作但事實上這段話有...

馬克於 2016-12-29 發表｜ 8149 次瀏覽
Big Data
30天學會Data Integration - Kettle 系列第 26 天

Step - Email通知

此篇要來介紹Email通知的功能，通常資料轉置是很龐大的，一跑可能就好幾個小時，我們當然也不會傻傻的在那邊等先跑去打混摸魚一下再說XD，所以最希望有自動通知的功...

juben 於 2017-01-10 發表｜ 8018 次瀏覽
Big Data
30天學會Data Integration - Kettle 系列第 12 天

Step - 讀取資料庫

此篇要介紹讀取資料來源最常用到的Step，當然就是[Input]Table input了，另外[Big Data]中也提供Hadoop與MongoDB的資料讀取...

juben 於 2016-12-27 發表｜ 7994 次瀏覽
Big Data
30天學會Data Integration - Kettle 系列第 19 天

Step - Merge Join與篩選資料

本篇要介紹另外一種Join的Step：[Joins]Merge Join，Join的類型有四種可以選擇，而前一篇的Database Join就只有Left Jo...

juben 於 2017-01-03 發表｜ 7983 次瀏覽