iT邦幫忙

jeffery5bai
iT邦新手 5 級 ‧ 點數 96
Machine Learning Engineer 國立台灣大學資訊管理研究所
638
累計瀏覽數
站內簡訊 追蹤

jeffery5bai 的發文列表 21

0 Like 0 留言 128 瀏覽

技術 Ep21｜Spark application 跑在 Kubernetes 時，Driver Pod、Executor Pod 與 scheduler 怎麼合作？

pyspark data engineering
2026-10-16 由 jeffery5bai 分享
0 Like 0 留言 261 瀏覽

技術 Ep20｜Spark application 跑在 YARN 時，ResourceManager、ApplicationMaster、NodeManager 各自做什麼？

pyspark data engineering
2026-10-15 由 jeffery5bai 分享
1 Like 0 留言 347 瀏覽

技術 Ep19｜同一個 Spark application，放到 YARN 或 Kubernetes 後誰替它找資源？

pyspark data engineering
2026-10-14 由 jeffery5bai 分享
1 Like 0 留言 453 瀏覽

技術 Ep18｜Executor 消失時，Spark 怎麼繼續跑？從 task retry 看 application 的恢復路徑

pyspark data engineering
2026-10-13 由 jeffery5bai 分享
1 Like 0 留言 512 瀏覽

技術 Ep17｜資料、shuffle、cache 到底落在哪裡？

pyspark data engineering
2026-10-12 由 jeffery5bai 分享
1 Like 0 留言 593 瀏覽

技術 Ep16｜同一個 Spark job 進 cluster 後，task 如何被送到 Executor？

pyspark data engineering
2026-10-11 由 jeffery5bai 分享
1 Like 0 留言 702 瀏覽

技術 Ep15｜我的第一個 Spark cluster：Master、Worker、Driver、Executor 分別在哪裡？

pyspark data engineering
2026-10-10 由 jeffery5bai 分享
0 Like 0 留言 755 瀏覽

技術 Ep14｜同一份表，Spark 為什麼能少讀那麼多資料？從 Parquet 結構看 column pruning、predicate pushdown 與 partition pruning

pyspark data engineering
2026-10-09 由 jeffery5bai 分享
0 Like 0 留言 831 瀏覽

技術 Ep13｜Parquet、ORC、CSV、JSON：資料檔格式怎麼影響 Spark？

pyspark data engineering
2026-10-08 由 jeffery5bai 分享
0 Like 0 留言 889 瀏覽

技術 Ep12｜Iceberg 為什麼重新定義一張表？從 Hive-style table 到 modern table format

pyspark data engineering
2026-10-07 由 jeffery5bai 分享
jeffery5bai的鐵人檔案
jeffery5bai的收藏
jeffery5bai的追蹤
jeffery5bai的Like
jeffery5bai的紀錄
jeffery5bai的訂閱列表