2025 iThome 鐵人賽
沒在獨自升級的 一起來
生成式 AI
選手 146 文章 2972
Day 6
2025-09-20
93
0
在自然語言處理與生成式 AI 的發展中,Self-Attention(自注意力) 機制可說是顛覆傳統模型的一大突破。傳統的 RNN 或 LSTM 主要依靠序列的...
Day 17
2025-10-01
93
0
前面幾天我一直在跟GPT-2、Qwen mini這些小模型奮戰,常常遇到文字接龍、重複句子的狀況。雖然有趣,但老實說要拿來做研究或專題真的不太實用。既然我在Da...
Day 2
2025-09-16
93
0
生成式 AI 的出現並不是一蹴可幾,而是人工智慧發展長河中的自然演進。早期的 AI 系統並沒有「生成」能力,而是以 規則系統(Rule-based System...
Day 4
2025-09-18
93
0
政府公開資料集提供了大量經過整理、結構化的資訊,這些資料通常以XML或CSV格式釋出,具有極高的可靠性。這類資料集是建立RAG知識庫的絕佳起點,能為我的AI顧問...
Day 3
2025-09-17
93
0
VLM 系列
VLM架構 VLM 的核心在於其具備將圖像轉換為 LLM 可理解的格式的能力,大部份的VLM運作包括三個主要組件: 大型語言模型 (LLM):這是 VLM 的...
Day 19
2025-10-03
93
0
  我們昨天從零開始手寫了 LLaMA2,並且體驗了 tokenizer 訓練和簡單的預訓練流程,雖然收穫滿滿,但實際上很少人會真的從零實作 Transform...