iT邦幫忙

rag相關文章
共有 130 則文章
鐵人賽 生成式 AI DAY 5

技術 Part1: Azure聊天機器人原理-RAG&LLM

上一篇我們一起看了聊天機器人的文檔餵食秀,今天要來科普兩個聊天機器人相關的專有名詞,RAG和LLM,這兩個縮寫就在我們系列文的主標題中,但到現在還沒好好跟大家解...

鐵人賽 生成式 AI DAY 19

技術 day19 製作給予GenAI的Diagram as Code教科書(一):課本與爬蟲資料標記

前言 在day18我們說明我們的計畫,主要兩部分教科書課本和擴充資料,今天我們會製作課本的內容,主要會將Guide的內容進行整理,並且存成txt檔案。 正文...

鐵人賽 生成式 AI DAY 20
懶人救星:生成式AI 系列 第 20

技術 Day20-RAG大秘密揭露!資料檢索其實可以這麼高效

前言✨ LlamaIndex Querying 功能為用戶提供了一個強大的數據檢索工具。這項功能使用戶能夠以簡單而直觀的方式查詢資料,無論是尋求具體答案還是進行...

鐵人賽 生成式 AI DAY 19
懶人救星:生成式AI 系列 第 19

技術 Day19-從零開始:如何透過LlamaIndex儲存Index、Documents、Vector?

前言✨ 在先前的文章已經介紹了如何創建 Documents、Index 等方法,今天要介紹如何將結果儲存起來,這樣就不需要每次都重新訓練了。 LlamaInde...

鐵人賽 生成式 AI DAY 18

技術 day18 Diagram as Code 創建RAG資料庫計畫:製作給予GenAI的教科書

前言 day16、17我們快速的介紹Diagram as Code函式庫的API,並且介紹常見的幾個元件以及可以客製化的屬性,現在我們打算將此函式庫的API以及...

鐵人賽 生成式 AI DAY 18
懶人救星:生成式AI 系列 第 18

技術 Day18-從零開始:如何透過LlamaIndex建立Indexing?

前言✨ 在 LlamaIndex🦙 中,Indexing 模組是一個關鍵的組件,負責組織和存儲來自不同數據來源的資訊,以便更有效地進行檢索。這個模組的核心是節點...

鐵人賽 生成式 AI DAY 17

技術 day17 Diagram as Code API (二) : Cluster & Edge

前言 昨天我們進行了diagram 和node的介紹,今天我們簡單快速的介紹Cluster以及Edge 正文 Cluster 參考資料:https://d...

鐵人賽 生成式 AI DAY 16

技術 day16 Diagram as Code API (一) : 圖表與節點

前言 昨天介紹了三個架構圖的繪圖工具,那麼今天我們會開始介紹 Diagram as Code 這個函式庫的內容 正文 安裝 首先先從安裝開始 pip i...

鐵人賽 生成式 AI DAY 15

技術 day15 繪製架構圖工具介紹:Plant UML、Diagram as Code 、Eraser

前言 之前我們介紹RAG,以及RAG各個資料源,甚至我們應用RAG製作一個文件分析器, day15,我們會開始製作我們的RAG資料源,首先我們先進行繪製架構圖函...

鐵人賽 生成式 AI DAY 17
懶人救星:生成式AI 系列 第 17

技術 Day17-從零開始:如何透過LlamaIndex串接Embedding Model?

前言✨ Embedding、Embedding、Embedding 到底什麼是 Embedding? 你是否曾經想過,當你在網路上搜尋一些資訊時,背後的運作原理...

鐵人賽 生成式 AI DAY 15
懶人救星:生成式AI 系列 第 15

技術 Day15-從零開始:如何透過LlamaIndex讀取檔案(下)?

LlamaParse📄 LlamaParse 是LlamaIndex所開發的另一項服務,主要用於處理/解析文本數據,並提供OCR、輸出格式轉換(Markdown...

鐵人賽 生成式 AI DAY 16
懶人救星:生成式AI 系列 第 16

技術 Day16-從零開始:如何透過LlamaIndex串接LLM Model?

前言 隨著大型語言模型(LLM)的快速發展,如何快速地將模型串接整合,成為了許多開發者面臨的挑戰。LlamaIndex 作為一個資料框架,提供了多種 LLM 接...

鐵人賽 生成式 AI DAY 14

技術 day14 chatDocument 文件分析器(二):混合資料格式解析!完全版chatDocument接受多檔案多來源的文件分析器

前言 昨天我們利用streamlit快速建構出csv檔案的智能文件分析器,今天我們將文件分析器利用自定義的Loader擴充py、text、pdf等資料格式,甚至...

鐵人賽 生成式 AI DAY 13

技術 day13 chatDocument 文件分析器(一):智能CSV分析與StreamLit前端介面

前言 前幾天我們利用外部資料的力量,來提示LLM,並且使得LLM得到更多內容的提示生成精確的回覆,那麼今天我們打算製作一個可以讓使用者自由選擇檔案的UI介面,並...

鐵人賽 生成式 AI DAY 14
懶人救星:生成式AI 系列 第 14

技術 Day14-從零開始:如何透過LlamaIndex讀取檔案(上)?

【LlamaIndex🦙-Loading】 Nodes/Documents📝 Nodes/Document 是 LlamaIndex 中最核心的概念,用來封裝...

鐵人賽 生成式 AI DAY 12
懶人救星:生成式AI 系列 第 12

技術 Day12-LlamaIndex或LangChain,該選哪一個?

LlamaIndex🦙 vs LangChain🐦 LlamaIndex🦙 LlamaIndex 是一個專為構建和管理大型語言模型(LLM)應用而設計的工具。...

鐵人賽 生成式 AI DAY 11
懶人救星:生成式AI 系列 第 11

技術 Day11-打破語言模型的極限!RAG 技術如何讓 GPT 更聰明?

What is RAG (Retrieval-Augmented Generation)? RAG(檢索增強生成)是一種將預訓練(Pre-training)的大...

鐵人賽 生成式 AI DAY 12

技術 day12 讓PDF 成為 AI 腦袋的一部分:自製簡易ChatPDF前置作業

前言 我們已經介紹HTML、csv、txt、py檔案作為外部資料源,使得LLM可以得到額外的資訊,並且獲得更為精準的回應,那麼我們要介紹最後一個常見的外部資料源...

鐵人賽 生成式 AI DAY 13
懶人救星:生成式AI 系列 第 13

技術 Day13-LlamaIndex 🦙全解析:從資料讀取到多輪對話,一網打盡!

LlamaIndex🦙 今天的主題是 LlamaIndex 的主要功能介紹, LlamaIndex 集成了 Chatbot 中的大部分應用,從QA、多輪對話到...

鐵人賽 生成式 AI DAY 25

技術 【Day 25】- 數位轉型下的工安革命:知識圖譜與LangGraph的完美結合

摘要這篇文章深入探討了如何將知識圖譜與 LangGraph 結合,打造一個智慧化的工安監控管理系統。文章首先介紹了知識圖譜在管理工安資料的優勢,包括儲存結構化...

鐵人賽 生成式 AI DAY 26

達標好文 技術 【Day 26】- Ollama: 革命性工具讓本地 AI 開發觸手可及 - 從安裝到進階應用的完整指南

摘要這篇文章是一篇關於 Ollama 的詳細指南,介紹了 Ollama 這個開源本地大型語言模型運行框架。文章首先介紹了 Ollama 的背景、特性和優點,強...

鐵人賽 生成式 AI DAY 24

技術 【Day 24】- GraphRAG:革新檢索增強生成的新範式

摘要這篇文章介紹了一種名為 GraphRAG 的新型檢索增強生成技術,它由微軟研究團隊提出,旨在突破傳統 RAG 方法在處理複雜資訊時的局限性。GraphRA...

鐵人賽 生成式 AI DAY 23

技術 【Day 23】- Adaptive-RAG:動態檢索策略提高系統問答精準度

摘要這篇文件介紹了一種名為「Adaptive-RAG」的技術,它旨在提升問答系統的準確性和效率。Adaptive-RAG 的核心概念是根據使用者查詢的複雜度動...

鐵人賽 生成式 AI DAY 22

技術 【Day 22】- CRAG: 檢索增強生成的糾錯機制 - 提升大型語言模型問答精確度

摘要這篇文章介紹了一種名為「Corrective RAG (CRAG)」的技術,旨在提升大型語言模型(LLM)在問答系統中的準確性和可靠性。CRAG 的核心思...

鐵人賽 生成式 AI DAY 21

技術 【Day 21】- 從基礎到進階: 掌握RAG基礎並使用LangGraph實現Agentic RAG

摘要這篇文章探討了檢索增強生成 (Retrieval-Augmented Generation, RAG) 技術,它結合了資訊檢索和文本生成,以克服現有大型語...

鐵人賽 生成式 AI DAY 11

技術 day11 文字程式檔的智慧學習:讓LLM成為你的程式碼教學助手

前言 昨天和前天,我們使用網頁資料和CSV資料作為外部的資料源,今天我們會介紹使用txt檔案,或者是副檔名為py的檔案來進行匯入轉成向量,並作為資料源給LLM提...

鐵人賽 生成式 AI DAY 10

技術 day10 智能CSV分析器,讓LLM幫你分析與統整

前言 昨天我們利用網頁的資料來進行LLM的資訊擴充,今天我們嘗試不同的資料來源,這次我們試試看CSV檔案 正文 資料來源 我們使用政府的資料開放平台的低收入戶...

鐵人賽 生成式 AI DAY 9

技術 day9 打造智能新聞分析系統:從資料抓取到GenAI智慧回應

前言 今天我們會展示以抓取新聞為外部資料源,並且用OpenAI的embeddingmodel將資料源轉成向量存入本地的向量資料庫,接著再將使用者詢問的問題,進行...

鐵人賽 生成式 AI DAY 8
懶人救星:生成式AI 系列 第 8

技術 Day8-10個Prompt技巧,讓AI徹底讀懂你的心!

為什麼要學好 LLM Prompt 技巧? 「溝通的藝術」不管在和人類還是AI溝通都扮演著重要的地位。在當今數位時代,語言模型(LLM)如 ChatGPT, C...

鐵人賽 生成式 AI DAY 8

技術 day8 LangChain RAG:資料庫建置到檢索生成解析

前言 昨天我們進行RAG的介紹、使用RAG的步驟與優劣勢,那麼今天我們將會介紹我們在LangChain使用RAG的詳細步驟,畢竟會需要外部資料源,我們之後會從資...