前情提要
昨天介紹了數據類型以及如何簡單模型模型參數量,最後有提到激活的部分,我們針對這個更加詳細介紹。
參考連結 & 圖片來源:
https://ww...
前情提要
昨天把簡單的 MoE 觀念介紹完了,主要就是三個部分專家, 門控, 選擇器。
參考文章 & 圖片來源
https://www.cnblogs....
上一篇文章中,我們用最簡單的 Native RAG 來實作出這個功能以後,接下來我們將來幫他升級一下。
根據之前這張圖,我們事實上可以知道 Native RA...
在前幾天,我們體驗了 Playground,並探索了 GenAI 的使用情境。今天開始,我們要進入更實戰的部分:如何透過程式呼叫 Azure AI Foundr...
系列主旨
降低 AI 模型訓練能耗與碳排,兼顧性能與 ESG 指標,實踐綠色 AI。
📌 Part 1:能耗與碳足跡分析
目標
監測模型訓練耗能與碳排。
技術:...
前面在介紹 Entropy(熵) 的時候,我們提到它可以用來衡量資料的不確定性和驚喜程度,而在 Decision Tree 裡,我們利用 entropy 來判斷...