2023 iThome 鐵人賽
帶我們前進的 是想證明自己的力量
AI & Data
選手 121 文章 2526
Day 6
2023-09-21
497
0
Pedro Domingos的演算法分類: 符號學派 集成學習法Ensemble Method 集成學習法:降低一個樣本的缺點,混合多種樣本子集合...
Day 14
2023-09-29
497
0
再一個集成學習方法~~ 白話來說通過叠代地訓練決策樹每一棵樹都試圖糾正前一棵樹的預測錯誤從而逐步提升模型的性能 基本原理:初始化模型:使用一個簡單的模型(比如...
Day 28
2023-10-13
497
0
再續昨天!今天的筆記把論文剩餘的部分整理完 Hard negative mining 難例挖掘 由於存在大量的負樣本,所以導致嚴重的類別不平衡問題,訓練時...
Day 14
2023-09-29
497
0
講師notebook 前面兩篇都是用較小的模型做改進,這一篇開始要嘗試著使用較大模型、較大輸入、集成模型什麼意思呢?以下分別解釋 較大模型:指的是模型的結構更...
Day 27
2023-10-12
497
0
透過 edX - Large Language Modes: Application through Production 課程提到的 LLMOps Noteb...
Day 20
2023-09-21
497
0
目前除了BLEU以外找不到好的衡量GPT模型訓練結果好壞的方法,不過以之前的經驗,其實跟直接算loss也差不多,所以在pretrain與sft的階段都直接使用v...