技術 Day06:最佳匹配模型(Best Match Model)

先來複習一下IR三要素如下: Term Frequency Inverse Document Frequency Document Length Normal...

技術 語義檢索 Semantic Search NLP ( BM25 +wordcloud+LSA summary )

本文將完成： 語義檢索 從 IMDB影評檔(100則)--> 從文字欄位'IMDB_plot'，找出BM25分數最高者。--> 以worldclo...

技術 LLM Note Day 21 - 資訊檢索小知識 IR Tips

簡介 資訊檢索 (Information Retrieval, IR) 在討論如何快速的搜尋使用者想要找到的結果，在 LLM 出現之前已經是個相對成熟的領域，我...

技術 COVID-19 literature searching (BM25)文獻搜尋-BM25方法

今天選個大資料集，來試試看BM25的語義搜尋。(據說BM25不必先做”斷詞處理”，說錯了，是不必處理stopwords)59萬筆COVID-19相關文獻860M...

技術 Semantic search BM25 COVID-19 dataset 自然語言BM25搜尋新冠文獻資料

延續上一篇( 連結 ) 做法，我們換一個資料庫，試試看NLP BM25 的搜尋功能如何。資料庫來源：COVID-19 metadata.csv downloa...