Day14-xgboost( Extreme Gradient Boosting ) - iT 邦幫忙::一起幫忙解決難題，拯救 IT 人的一天

2023 iThome 鐵人賽

DAY 14

0

AI & Data

什麼演算法?一起來學機器學習!系列第 14 篇

Day14-xgboost( Extreme Gradient Boosting )

15th鐵人賽機器學習 machine learning 學習筆記 xgboost

團隊好想放假大學

2023-09-29 09:21:37

328 瀏覽

分享至

是基於 Gradient Boosted Decision Tree (GBDT) 改良與延伸

Boosting

XGBoost是一種集成學習技術，通過組合多個弱學習機來構建一個強學習機
每個新的學習器都會嘗試修正前面學習器的錯誤，逐步提高模型的性能。

弱學習機

XGBoost通常以決策樹作為弱學習機
這些決策樹通常max_depth很小

XGBoost

XGBoost原理類似gradient boosting

使用梯度提升的方法來訓練每棵樹
不過它加入了正規化(GBDT沒有，當正規化係數為 0 ，即為一般的 GBDT。)

參考資料&圖源

Day13-Gradient Boosting

系列文

什麼演算法?一起來學機器學習! 共 30 篇

目錄

RSS系列文訂閱系列文

6 人訂閱

完整目錄

直播研討會

{{ item.subject }}

{{ item.channelVendor }} {{ item.webinarstarted }} |

{{ formatDate(item.duration) }}

直播中

尚未有邦友留言

立即登入留言

參賽組數

1064 組

團體組數

40 組

累計文章數

22200 篇

完賽人數

602 人

15th鐵人賽 16th鐵人賽 13th鐵人賽 14th鐵人賽 12th鐵人賽 11th鐵人賽鐵人賽 2019鐵人賽 javascript 2018鐵人賽 python 2017鐵人賽 windows php c# windows server linux css react vue.js

IT邦幫忙