技術 Day 6｜斷詞（上）：Tokenization / Segmentation?

引言 接下來要來介紹的是 NLP 中，不可或缺的「斷詞」，也可以說「分詞」！但今天我們不做程式的實作，而是先釐清兩個常見，但可能會有點小混淆的概念：Tokeni...