iT 邦幫忙::一起幫忙解決難題，拯救 IT 人的一天

1 Like 0 留言 7009 瀏覽

鐵人賽 AI/ ML & Data DAY 19

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 19 篇

技術 [Day 19]Data-Model-Model Training! 淺談如何在有限的資源上高效地訓練LLM

今天會帶大家使用 unsloth 這個好用的 library ，在單張消費級顯卡上微調自己的大語言模型🚀🚀！前情提要 Day 17我們結合多種不同資料來源與技...

壓縮甜 ‧ 2024-10-03

1 Like 0 留言 6169 瀏覽

鐵人賽 AI/ ML & Data DAY 18

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 18 篇

技術 [Day18]🧐如何選擇適合特定任務的 LLM？深入分析評測 LLM 常用的 Benchmark 與 Leaderboard

近一兩年，不管是開源或閉源，全世界的大模型競賽已呈現出白熱化的局面，市場上湧現出數量眾多的模型。各大實驗室和企業大廠不僅注重模型參數、效能的提升，還常在宣傳中強...

壓縮甜 ‧ 2024-10-02

0 Like 0 留言 5696 瀏覽

鐵人賽 AI & Data DAY 2

AI Facial Expression Recognition: Data, Model, Application 系列第 2 篇

技術 [Day 02] 在表情資料尋找邂逅是否搞錯了甚麼 (Facial Expression Recognition)

表情資料集的介紹與下載俗話說：「知己知彼，百戰百勝」，這句話同樣也適合用在資料科學上，我們必須對資料的背景非常熟悉，才能夠設計出適合的演算法。今天，讓我介紹這...

佑佑來了 ‧ 2021-09-17

0 Like 0 留言 4374 瀏覽

鐵人賽 AI & Data DAY 6

跟top kaggler學習如何贏得資料分析競賽系列第 6 篇

技術 [Day 6] bag of words / BOW 詞袋

從文字或影像提取特徵 Feature extraction from texts, images純 Text 競賽: Allen AI challenge純 I...

madeleine ‧ 2019-09-07

1 Like 1 留言 4251 瀏覽

鐵人賽 AI/ ML & Data DAY 30

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 30 篇

技術 [Day 30]告別複雜巨獸 - 一起看第八名的小清新解法與IT鐵人賽後回望

前面介紹的方法又是擴增一堆訓練數據集，又是 ensemble 一堆不同架構、不同訓練方法的模型，真的心滿累的。所以，今天要跟大家分享的是本次賽題第八名的作法，...

壓縮甜 ‧ 2024-10-14

1 Like 0 留言 3835 瀏覽

鐵人賽 AI & Data DAY 13

先別急著學 Python | The Secret to Success in Python 系列第 13 篇

技術 Ɖ13-香料/ 大量 Excel 資料檔案合併

香料 Spices 辛香料的搭配是我很愛的一種料理方法，利用非常天然簡單的香料，點綴著原先澀澀略腥的料理，他不經過多的加工，早期甚至應用於藥材，帶給他一層神秘的...

juck30808 ‧ 2022-09-27

1 Like 0 留言 3776 瀏覽

鐵人賽 AI/ ML & Data DAY 23

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 23 篇

技術 [Day 23]為何LLM每次的回答都不一樣？淺談DeepSeek模型與Self-Consistency實戰應用

我們要如何利用「每次 LLM 的回覆都不一樣」這個現象，來增加產生正確答案的機率呢？今天會帶大家實際應用 self-consistency 到賽題中，並透過設計...

壓縮甜 ‧ 2024-10-07

1 Like 0 留言 3604 瀏覽

鐵人賽 AI/ ML & Data DAY 27

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 27 篇

技術 [Day 27]照妖(AI)鏡下的秘密-利用TF-IDF、BPE編碼、Kmeans Cluster和DetectGPT技術區分人類與AI寫作

標題提到一堆技術名詞...別擔心，今天都會串起來，像一個偵探故事一樣，每種技術都是線索，幫助我們揪出到底誰找 AI 當槍手。👀 前言昨天我們聊到僅用「錯字率」...

壓縮甜 ‧ 2024-10-11

1 Like 0 留言 3497 瀏覽

鐵人賽 AI/ ML & Data DAY 29

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 29 篇

技術 [Day 29]模型與資料的超級 ensemble 體 - 淺談 Curriculum Learning 訓練方法與 Ghostbuster (捉鬼人)如何識別 AI 和人類作文

今天來學習一下第一名和第三名包山包海的 ensemble 大法。 🥇1st Solution 第一名的解法不愧是第一名，他們真的花好多 effort 在解這個賽...

壓縮甜 ‧ 2024-10-13

1 Like 0 留言 3360 瀏覽

鐵人賽 AI & Data DAY 11

先別急著學 Python | The Secret to Success in Python 系列第 11 篇

技術 Ɖ11-榫卯/ 一些在 Python 簡單的，在 Excel 會很複雜的事情

一些在 Python 簡單的，在 Excel 會很複雜的事情結束上次提及的加權平均數，這次的目的是展示一些常見的 Excel 任務，以及你如何在 pandas...

juck30808 ‧ 2022-09-25

1 Like 0 留言 3265 瀏覽

鐵人賽 AI/ ML & Data DAY 28

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 28 篇

技術 [Day 28]不講武德的Host-不能太倚賴錯字率，一起看第二名「復刻米其林三星料理式」的資料擴增法，與「雞蛋放兩籃」的 ensemble 思路

我很喜歡今天介紹的第二名的 solution，在研究的時候有一種「啊哈moment」的快樂。昨天我們分享將文章轉成 TF-IDF 向量後送進 Logisti...

壓縮甜 ‧ 2024-10-12

1 Like 0 留言 3137 瀏覽

鐵人賽 AI & Data DAY 21

先別急著學 Python | The Secret to Success in Python 系列第 21 篇

技術 Ɖ21-溫沙拉/ 進階樞紐分析呈現與過濾式

進階樞紐分析表 Pivot table 延續上一篇的 pandas pivot_table 函數以及數據分析與思考基本問題。 2021 - juck3080...

juck30808 ‧ 2022-10-05

0 Like 0 留言 2819 瀏覽

鐵人賽 AI & Data DAY 2

跟top kaggler學習如何贏得資料分析競賽系列第 2 篇

技術 [Day 2] kaggle網站重點/ 規劃 pipeline

kaggle網站重點 Data : 資料的區塊有兩個重點, description 跟 rules 要研讀清楚, 尤其是 rulesModel : 建模要發揮最...

madeleine ‧ 2019-09-03

1 Like 0 留言 2767 瀏覽

鐵人賽 AI & Data DAY 12

先別急著學 Python | The Secret to Success in Python 系列第 12 篇

技術 Ɖ12-榫卯/ 利用 Python 完成 Vlookup ！超級好用的 FuzzyWuzzy

Vlookup 的好朋友 FuzzyWuzzy Vlookup 是我們很常使用的 Excel 功能，他幫我們達成快速匹配數值，當我們需要找到 A 所對應的 B...

juck30808 ‧ 2022-09-26

2 Like 0 留言 2560 瀏覽

鐵人賽 AI & Data DAY 23

先別急著學 Python | The Secret to Success in Python 系列第 23 篇

技術 Ɖ23-溫沙拉/ 簡單 Pandas 匯出報表至 Excel

成功打印出樞紐分析表後 Pivot Table Print 提及了如何利用 get_level_values 來使工作自動化，我們也利用了 xs 函數來進階了解...

juck30808 ‧ 2022-10-07

1 Like 0 留言 2541 瀏覽

鐵人賽 AI & Data DAY 9

先別急著學 Python | The Secret to Success in Python 系列第 9 篇

技術 Ɖ9-榫卯/ 利用多種 Python 方式簡單計算加權平均數

榫卯，如同拼圖一樣組合起結構榫卯，是中國傳統木工中接合建築與結構的方式，利用榫頭插入另一個的卯眼中，使兩個構件連接並固定，與現代工藝不同的地方在於榫和卯眼之間...

juck30808 ‧ 2022-09-23

2 Like 0 留言 2501 瀏覽

鐵人賽 AI & Data DAY 24

先別急著學 Python | The Secret to Success in Python 系列第 24 篇

技術 Ɖ24-溫沙拉/ 自定義欄目大小與內容

在溫沙拉結束後 After the Salade Tiede 還記得前幾天我們提到＂Salade Tiede＂的意思，溫沙拉的本質並未從沙拉做改變，而是在既有的...

juck30808 ‧ 2022-10-08

1 Like 0 留言 2447 瀏覽

鐵人賽 AI/ ML & Data DAY 26

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 26 篇

技術 [Day 26]"是人是AI，一照便知" - 沒想到最終能找出LLM槍手的原因，是因為LLM太完美了?!

自從2023年大型語言模型如ChatGPT火起來後，這些AI不僅能寫出幾乎和人一樣的文章，還開始影響學生的學習方式。雖然這讓寫作業變得簡單了，但也可能讓學生們...

壓縮甜 ‧ 2024-10-10

0 Like 0 留言 2382 瀏覽

技術深度學習常用程式碼

之前沒整理程式碼的習慣經常想到某些程式碼就要翻以前寫的覺得有點浪費時間之後有用到就貼上來慢慢更新然後我會打一些關鍵字方便自己用Ctrl + F 搜尋 #ka...

Alien ‧ 2021-04-05

1 Like 0 留言 2284 瀏覽

鐵人賽 AI/ ML & Data DAY 14

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 14 篇

技術 [Day14]🧟成為特級LLM咒言師的第三天 - All you need is just "lucrarea" ：淺談文本對抗攻擊(Adversarial Attack)原理篇

對圖像做 adversarial attack 可能你已經很熟悉了，今天帶大家來看看怎麼對文本做對抗攻擊。第一名的 solution 就使用到 adversar...

壓縮甜 ‧ 2024-09-28

0 Like 0 留言 2209 瀏覽

鐵人賽 AI & Data DAY 4

跟top kaggler學習如何贏得資料分析競賽系列第 4 篇

技術 [Day 4] 特徵預處理及生成 Feature Preprocessing and Generation (Ordinal Feature, Categorical Feature)-2/2

2. Ordinal Feature 回到 Titanic dataset, 無庸置疑三個features 'sex, cabin, embarked' 都是...

madeleine ‧ 2019-09-05

0 Like 0 留言 2158 瀏覽

鐵人賽 AI & Data DAY 1

跟top kaggler學習如何贏得資料分析競賽系列第 1 篇

技術 [Day 1] 跟top kaggler學習如何贏得資料分析競賽 - 4周主題架構

為什麼選這個主題? 學習來源是 coursera 的一群年輕人在前 top 1 kaggler Alexander Djakonov 教導 ML 跟 kaggl...

madeleine ‧ 2019-09-02

2 Like 0 留言 2142 瀏覽

鐵人賽 AI/ ML & Data DAY 11

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 11 篇

技術 [Day 11]🧟你是個準一級LLM咒言師嗎？-淺談 prompt 逆向工程

有時候，大型語言模型（LLM）並不總是按照我們的意願工作。馬上12點快到了，你可能希望chatgpt趕快將一篇你正在寫的鐵人賽文章改寫得生動有趣、增加觸及，但...

壓縮甜 ‧ 2024-09-25

0 Like 0 留言 2054 瀏覽

鐵人賽 AI & Data DAY 7

跟top kaggler學習如何贏得資料分析競賽系列第 7 篇

技術 [Day 7] Word2vec, CNN

week 1 是亞歷珊卓主講, 看了一個禮拜, 一次又一次反覆的看著, 聽者俄式英文加上不僅神似 NPH (Neil Patrick Harris in ho...

madeleine ‧ 2019-09-08

2 Like 0 留言 1953 瀏覽

鐵人賽 AI & Data DAY 8

跟top kaggler學習如何贏得資料分析競賽系列第 8 篇

技術 [Day 8] EDA / Exploratory Data Analysis

第一週曾有說過天下沒白吃的午餐, 預處理後的重點仍是瞭解資料, EDA 幫助我們找出資料 insight , 理出真正的問題, 才能有對的, 好的解決方法, 不...

madeleine ‧ 2019-09-09

1 Like 0 留言 1795 瀏覽

鐵人賽 AI & Data DAY 10

先別急著學 Python | The Secret to Success in Python 系列第 10 篇

技術 Ɖ10-榫卯/ 利用分組 Python 方式計算加權平均數

更多的 Pandas Pandas包含多個內置函數，如sum、mean、max、min等，我們可以應用到 DataFrame 或分組數據中。他可以提高你在數據處...

juck30808 ‧ 2022-09-24

0 Like 0 留言 1628 瀏覽

鐵人賽 AI & Data DAY 11

跟top kaggler學習如何贏得資料分析競賽系列第 11 篇

技術 [Day 11] 資料清理及補充資料連結 / Dataset cleaning and additional materials and links

Dataset cleaning Constant features 重複特徵 Duplicated features Constant features...

madeleine ‧ 2019-09-12

1 Like 0 留言 1610 瀏覽

鐵人賽 AI & Data DAY 9

跟top kaggler學習如何贏得資料分析競賽系列第 9 篇

技術 [Day 9] Anonymized data 匿名資料

Anonymized data 匿名是保護資料免於用來找出真實資料的一種模式, 例如雜湊 hash 處理較敏感或機密的資料, 參賽者可透過合法的方式解匿名, 例...

madeleine ‧ 2019-09-10

1 Like 0 留言 1602 瀏覽

鐵人賽 AI & Data DAY 29

先別急著學 Python | The Secret to Success in Python 系列第 29 篇

技術 Ɖ29-布朗尼/ Pandas 的缺失值處理與應用

處理缺失數據真實的數據很少是乾淨的。更常見的情況是，很多有意思的數據集都有很多的數據缺失。更複雜的是，不同的數據源可能有著不同指代缺失數據的方式，我們會將這些...

juck30808 ‧ 2022-10-13

1 Like 0 留言 1593 瀏覽

鐵人賽 AI/ ML & Data DAY 2

一個Kaggle金牌解法是如何誕生的？跟隨Kaggle NLP競賽高手的討論，探索解題脈絡系列第 2 篇

技術 [Day 2] Kaggle 自動作文評分競賽（一）- 淺談數據洩露與內容匹配：如何確認訓練數據中的潛在泄漏？

在一個平凡的周末午後，高中老師安娜埋首於堆積如山的學生作文中。每一篇作文都承載著學生們的心血與努力，但三個班每人每週一篇長文寫作，安娜的批改速度總是趕不上學生...

壓縮甜 ‧ 2024-09-16