iT 邦幫忙::一起幫忙解決難題，拯救 IT 人的一天

斷詞相關文章

共有 4 則文章

0 人追蹤

追蹤

鐵人賽 AI & Data DAY 25

邁向成為語言資料科學家的偉大航道系列第 25 篇

我們尋找的並不應該是英雄，而是一個好的想法Noam Chomsky 前言還記得碩一下的時候，Lab 的老師找了以前一個現在在擔任軟體工程師的同學來課堂上演...

milanochuang ‧ 2022-10-10 ‧團隊KnULPers_from_NCCU

鐵人賽 AI & Data DAY 24

從機器學習到深度學習 - 30天搞懂常見演算法的基礎理論系列第 24 篇

今日大綱自然語言處理步驟 Bag of Words( BOW) TF-IDF(Term frequency-Inverse document frequen...

sarahwei0804 ‧ 2022-10-07

鐵人賽 Mobile Development DAY 16

長照小幫手 - 從 0 開始建置 Chatbot 的筆記 & 走錯路的心得系列第 16 篇

我們前面說過，中文不像英文，字與字中間與空白相間，所以中文句子要搭配 TF-IDF 前，需要先經過適當的斷詞。中文斷詞領域最常見的兩套工具就是 Jieba（結巴...

YR ‧ 2021-09-30 ‧團隊來自行雲者研發基地的菁英們

鐵人賽自我挑戰組 DAY 2

30天初步了解自然語言處理-自學筆記系列第 2 篇

一. 為何需要斷詞最主要的原因就是中文的最小一個單位就是一個詞，通常不能直接餵一個句子給你的語言模型處理，這樣模型連詞跟詞的關係都不知道，所以我們需要先利用斷詞...

eating ‧ 2021-09-02