iT邦幫忙

新手入門相關文章
共有 30 則文章

技術 每日一篇學習筆記 直到我做完專題 :( [Day43]

今天終於從期末地獄中解脫 又回來繼續學習拉之前在使用中發現jieba在切割詞的時候不是很精準並查到可以使用hugging face裡面的一些模型可以更快速的投入...

技術 Day 2|Python 資料分析必備基本功:資料型別、清單與字典實戰

在第一天完成開發環境建置與 Jupyter 配置後,今天正式進入 Python 核心語法。很多初學者直接跳進 Pandas 或繪圖套件時,常被各種資料取值方式搞...

技術 Day 6|資料清洗的第一道關卡:缺失值(NaN)的偵測、刪除與補值策略

第六天,我們要進入資料分析實務中最耗時、但也最關鍵的環節——資料清洗(Data Cleaning)。在現實世界中收集到的數據很少是完美無瑕的,常因為問卷漏填、感...

技術 Day 15|鐵人賽半程里程碑:小型綜合專案實戰,端到端資料分析 Pipeline 落地

第十五天!我們不知不覺已經完成了 30 天鐵人賽的一半進程。從最一開始的環境建置、NumPy 矩陣運算,到 Pandas 的資料清理、分組聚合、時間序列處理,再...

技術 Day 8|資料分組與聚合運算:GroupBy 與多維度統計實戰

第八天,我們要進入資料分析中最具洞察力的核心技能——分組與聚合(GroupBy & Aggregation)。清洗完資料後,我們通常不會逐筆看原始紀錄,...

技術 Python 到資料分析:30 天掌握資料處理與視覺化

本系列將用 30 天帶大家從零開始,循序漸進走入 Python 資料分析的世界。從最基礎的 Python 核心語法與環境建置開始,逐步推進到 NumPy 矩陣運...

技術 Day 3|NumPy 數值運算基石:陣列建立、形狀變換與向量化運算

第三天,我們要來認識 Python 資料分析的核心基石——NumPy。後續會大量使用的 Pandas 表格與繪圖套件,底層都是依賴 NumPy 進行高速的矩陣與...

技術 Day 12|進階統計視覺化:Seaborn 散佈圖與相關性熱力圖(Heatmap)實戰

第十二天,我們要從基礎繪圖進階到統計視覺化利器——Seaborn。昨天使用的 Matplotlib 適合精細調整圖表細節,而 Seaborn 是建立在 Matp...

技術 Day 14|特徵工程起步走:數值標準化與類別獨熱編碼(One-Hot Encoding)實戰

第十四天,我們正式踏入機器學習與進階數據建模的敲門磚——特徵工程(Feature Engineering)!乾淨的資料並不等於可以直接拿來給演算法計算的資料。例...

技術 Day 11|Matplotlib 資料視覺化起步走:折線圖、長條圖與中文顯示排解

第十一天,我們要正式邁入「資料視覺化」的領域!在完成資料清理與計算後,一張直觀的圖表遠比一堆冰冷的數字更能傳達商業洞察。Python 最老牌且生態系最龐大的視覺...

技術 Day 13|探索性資料分析(EDA)實務:五步驟快速洞察未知資料集

第十三天,我們要將前面所學的 Pandas 資料操作與 Seaborn 視覺化整合起來,進行資料分析領域最重要的標準流程——探索性資料分析(Explorator...

技術 Day 9|多表關聯與資料整合:Pandas Merge 與 Concat 實戰

第九天,我們要解決資料分析中極為常見的需求——多表格整併(Data Merging & Concatenation)。在實際專案裡,數據很少單獨存放在同...

技術 Day 10|時間序列資料處理:DateTime 轉換、時間特徵提取與週期分析

第十天,我們來到資料分析非常核心的一大主題——時間序列資料處理。無論是電商交易紀錄、網站流量日誌還是股市行情,資料幾乎都帶有時間戳記。然而原始資料讀入時,時間通...

技術 Day 26|進階線性模型:Ridge(L2)與 Lasso(L1)正規化回歸抗共線性與特徵篩選實戰

第二十六天,我們要回到連續型數值的預測任務,深入探討傳統線性回歸(OLS)的兩大致命傷——多元共線性 與 模型過度擬合。當輸入特徵數量眾多且彼此高度相關時,普通...

技術 Day 17|分類演算法起步走:邏輯斯迴歸(Logistic Regression)與混淆矩陣評估實戰

第十七天,我們要從「數值預測(回歸)」轉向機器學習另一大主流應用——分類問題(Classification)。昨天的線性回歸用來預測連續數值(如薪水、房價),但...

技術 Day 27|集成學習進階篇:Gradient Boosting原理與 XGBoost 分類實戰

第二十七天,我們要探索在各類 Kaggle 數據競賽與工業界應用中表現亮眼的代表性架構——Boosting。在 Day 20 介紹的隨機森林屬於 Bagging...

技術 Day 22|高維資料的降維魔法:主成分分析(PCA)與解釋變異量視覺化實戰

第二十二天,我們要探討資料科學領域經典的資料壓縮與降維技術——主成分分析(Principal Component Analysis,簡稱 PCA)。在真實資料集...

技術 Day 18|模型評估進階篇:ROC 曲線與 AUC 指標深度剖析實戰

第十八天,我們要繼續深化二元分類模型的評估指標。昨天我們認識了混淆矩陣,但混淆矩陣的計算高度依賴一個「預設分類門檻值(通常為 0.5)」。如果今天我們調整判斷門...

技術 Day 16|邁入機器學習大門:Scikit-Learn 資料集切割與線性回歸(Linear Regression)實戰

第十六天,我們正式踏入機器學習(Machine Learning)的領域!在昨天的半程專案中,我們完成了資料清理與特徵工程;今天我們要學習如何讓電腦「從數據中學...

技術 Day 25|模型持久化與生產落地前置:Joblib 模型儲存、載入與Pipeline實戰

第二十五天,我們要探討模型訓練完成後,如何邁向實際應用與工程落地的核心步驟—— Model Persistence 與 Inference Pipeline。在...

技術 Day 21|非監督式學習起步走:K-Means 分群演算法與手肘法(Elbow Method)實戰

第二十一天,我們要邁向機器學習的全新板塊——非監督式學習!在前面幾天介紹的線性回歸、邏輯斯迴歸與隨機森林中,資料都附帶了明確的解答標籤,模型的工作是去預測答案。...

技術 Day 20|集成學習首部曲:隨機森林(Random Forest)分類實戰與特徵重要性視覺化 標籤: Python、機器學習、Scikit-Learn、隨機森林、集成學習、新手入門 文章內容:

第二十天,我們要進入現代機器學習中最實用且強悍的技術——集成學習。,昨天學到的單一決策樹雖然直觀好懂,但容易受到極端值干擾且極易過擬合。為了解決這個缺點,隨機森...

技術 Day 19|非線性分類利器:決策樹(Decision Tree)分類實戰與可解釋樹狀圖視覺化

第十九天,我們要跨入具備非線性切分能力且直覺好懂的機器學習模型——決策樹(Decision Tree)。先前介紹的邏輯斯迴歸是在空間中劃出一條直線或平面,但現實...

技術 Day 23|模型調優核心心法:K-Fold 交叉驗證與超參數網格搜尋(GridSearchCV)實戰

第二十三天,我們要進入機器學習工程師最關鍵的調校利器——交叉驗證(Cross-Validation) 與 超參數網格搜尋(GridSearchCV)。在前面的篇...

技術 Day 24|破解現實世界的資料傾斜:不平衡資料處理與 SMOTE 過取樣實戰

第二十四天,我們要面對現實資料科學中最具挑戰性的痛點——類別不平衡(Class Imbalance)。在信用卡盜刷偵測、罕見疾病篩檢或設備故障預測中,正樣本(少...

技術 Day 30|總結:30 天資料分析與機器學習全景地圖

第三十天,我們終於抵達了這趟 30 天馬拉松的終點線!從第一天建立虛擬環境、摸索 NumPy 陣列矩陣運算,到利用 Pandas 進行各種棘手的資料清洗、時間序...

技術 Day 28|多模型競技擂台:主流分類器 Benchmark 評測與 ROC/AUC 橫向對比實戰

第二十八天,我們進入了鐵人賽的最後衝刺階段!在過去兩週內,我們陸續學過了Logistic Regression、Decision Tree、Bagging 集成...

技術 Day 29|期末綜合專案實戰:端到端機器學習 Pipeline 整合、超參數搜尋與模型發布落地

第二十九天,也是我們鐵人賽技術實作的最高峰!在過去的 28 天中,我們從最基礎的矩陣處理、數據清理、分組視覺化,一路走到監督式學習(回歸、決策樹、隨機森林、XG...

技術 AI 小白寫程式實戰乾貨:想讓 AI 寫得更順,先學會防它偷偷改壞

這一年,我讓 AI(人工智慧)幫我維護一套真的在運作的產品。 不是練習專案。不是做一個登入頁。也不是只要畫面好看就好的展示頁。 而是一套 AI 客服 SaaS。...

鐵人賽 AI 自動化 DAY 6

技術 Day 06|第一次交辦事項給 Hermes Agent

至此,我們已經把 Hermes Agent 安裝完成,也知道 AI Agent 和一般聊天型 AI 最大的差異。但是知道概念,跟真的使用是兩件事情。很多人在開始...