iT邦幫忙

RiceBugJ
iT邦見習生 ‧ 點數 280
4146
累計瀏覽數
站內簡訊 追蹤

鐵人檔案

2023 iThome 鐵人賽
回列表
AI & Data

30天認識主流大數據框架：Hadoop + Spark + Flink 系列

30天認識主流大數據框架：Hadoop + Spark + Flink

鐵人鍊成 ｜ 共 30 篇文章 ｜ 12 人訂閱 訂閱系列文 RSS系列文
0 Like 0 留言 549 瀏覽
DAY 11

Day11 - Hive 安裝與設置

前置作業 Java 7 以上，建議安裝 Java 8 Hadoop 3.x.y Hive 安裝 首先要到 Hive Releases 下載 binary 壓...

2023-09-26 ‧ 由 RiceBugJ 分享
0 Like 0 留言 602 瀏覽
DAY 12

Day12 - Hive 基本操作

Hive 使用 SQL-Like 查詢語言（Hive SQL），其語法與一般的 SQL 語法非常相似，唯一要注意的是，之前有提過 HDFS 只支援寫入、讀取與刪...

2023-09-27 ‧ 由 RiceBugJ 分享
0 Like 0 留言 941 瀏覽
DAY 13

Day13 - Spark 介紹 (1)：簡介與架構

為什麼需要 Spark ? MapReudce 的出現雖然解決了大數據離線計算的需求，但其有一些缺點存在，比如： 高延遲：MapReudce 在計算時通常...

2023-09-28 ‧ 由 RiceBugJ 分享
0 Like 0 留言 1414 瀏覽
DAY 14

Day14 - Spark 介紹 (2)：RDD

前言昨天的文章介紹了 Spark 的架構，還沒看過的人可以先看看：Day13 - Spark 介紹 (1)：簡介與架構 什麼是 RDD ? 昨天有提到，Re...

2023-09-29 ‧ 由 RiceBugJ 分享
0 Like 0 留言 727 瀏覽
DAY 15

Day15 - Spark 介紹 (3)：Spark SQL、DataFrame、DataSet

前言昨天介紹了 RDD，還沒看過的人可以先點這邊看 RDD 的介紹：Day14 - Spark 介紹 (2)：RDD 什麼是 Spark SQL？ Spar...

2023-09-30 ‧ 由 RiceBugJ 分享
0 Like 0 留言 1084 瀏覽
DAY 16

Day16 - Spark 安裝與配置

前言這篇文章會介紹如何安裝 Spark 並進行適當的配置，還不清楚 Spark 是什麼的人可以先看看 Spark 的介紹系列：Day13 - Spark 介紹...

2023-10-01 ‧ 由 RiceBugJ 分享
0 Like 0 留言 1285 瀏覽
DAY 17

Day17 - PySpark (1)：Basis

前言這篇文章會介紹 PySpark (Spark in Python)，因此要先安裝好 Python 與 Spark，還沒安裝好 Spark 的人可以先去看看...

2023-10-02 ‧ 由 RiceBugJ 分享
0 Like 0 留言 557 瀏覽
DAY 18

Day18 - PySpark (2)：Spark with Hive、SQL Syntax

前言昨天介紹了 PySpark 的基礎，還沒看過的可以先去看一下：Day17 - PySpark (1)：Basis 程式碼這次參賽的程式碼都會放在 Bi...

2023-10-03 ‧ 由 RiceBugJ 分享
0 Like 0 留言 504 瀏覽
DAY 19

Day19 - PySpark (3)：協同過濾推薦

前言前幾天介紹了 PySpark 的基礎與 SQL 語法，還沒看過的可以先去看一下：Day17 - PySpark (1)：BasisDay18 - PySp...

2023-10-04 ‧ 由 RiceBugJ 分享
0 Like 0 留言 595 瀏覽
DAY 20

Day20 - PySpark (4)：協同過濾推薦 with MLlib

前言再昨天的文章中，我們簡單介紹了協同過濾推薦，並用 DayaFrame APIs 來進行實做，大家可以先看看這篇文章再回來：Day19 - PySpark...

2023-10-05 ‧ 由 RiceBugJ 分享
RiceBugJ的鐵人檔案
RiceBugJ的收藏
RiceBugJ的追蹤
RiceBugJ的Like
RiceBugJ的紀錄
RiceBugJ的訂閱列表