iT 邦幫忙::一起幫忙解決難題，拯救 IT 人的一天

1 Like 0 留言 3650 瀏覽

鐵人賽 AI & Data DAY 6

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 6 篇

技術 Day06 Pandas skills: Data Wrangling. Pandas操作：資料角力

資料角力(有時也稱為資料改寫)，簡單來說是將資料整理成合乎需求的格式，以利後續視覺化或者套用機器學習模型。今天要來介紹一些運用Pandas操作進行資料角力的方式...

kyt ‧ 2019-09-07

1 Like 0 留言 7366 瀏覽

鐵人賽 AI & Data DAY 5

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 5 篇

技術 Day05 Pandas skills: read in files. Pandas操作：讀取不同格式

先來介紹如何讀入(.csv)檔、以及Pandas一些基本常用指令解說：The first part will be about how to read in (...

kyt ‧ 2019-09-06

0 Like 0 留言 10969 瀏覽

鐵人賽 AI & Data DAY 4

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 4 篇

技術 Day04 Outlier and some Numpy. 離群值與Numpy操作

在蒐集資料的過程中，可能會因測量方法、人為疏失或實驗誤差等，導致所蒐集到的資料中出現個別值極度異於其它資料的值，即為離群值(Outlier)；離群值可能導致分析...

kyt ‧ 2019-09-05

0 Like 0 留言 7293 瀏覽

鐵人賽 AI & Data DAY 3

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 3 篇

技術 Day03 Pandas DataFrame, Label Encoding and One Hot Encoding. Pandas基本資料類型、標籤編碼與獨熱編碼

編寫程式碼時，載入已經存在的套件能幫我們節省下許多時間，又載入套件時，常有許多約定成俗的縮寫方式，需要稍微注意一下。不僅是為了簡短程式碼，也為了日後能順利閱讀討...

kyt ‧ 2019-09-04

1 Like 0 留言 6730 瀏覽

技術資料分析套件-pandas-profiling

緣起每拿到新資料時，總用pandas做一些重複性的探勘工作，今天發現一個好套件-pandas-profiling，套件作者覺得describe實在是太陽春了，...

蜻蜓 ‧ 2019-05-07

1 Like 1 留言 4897 瀏覽

技術 [Python] pandas_profiling DataFrame 詳細資料分析視覺化

大家使用Pandas DataFrame分析不外乎就是使用內建的describe()，如果要其他分析就需要再手動進行，再利用繪圖package視覺化。今天分享...

crowntail ‧ 2019-04-09

0 Like 0 留言 4099 瀏覽

技術 [Python] Pandas df.iterrow 平行處理

#import pakage import pandas as pd import multiprocessing #指定主機有多少CPU，並把df 平均分配...

crowntail ‧ 2019-03-19

0 Like 0 留言 3794 瀏覽

技術 [Python] Pandas 小記錄

pd.set_option('display.max_rows', 500) pd.set_option('display.max_columns', 500)...

crowntail ‧ 2019-03-03

3 Like 0 留言 43651 瀏覽

技術 [Python] Pandas 並列(同時)顯示DataFrame

平常在使用Jupyter notebook時，一個cell 只能顯示一個DataFrames利用自製Class 可以同時顯示多個DataFrames clas...

crowntail ‧ 2019-02-25

0 Like 0 留言 7785 瀏覽

鐵人賽自我挑戰組 DAY 3

Machine Learning 學習筆記系列第 3 篇

技術 [第三天] Pandas 練習

鳶尾花資料集昨天導入鳶尾花資料集，今天就再詳細的了解一下這個資料的描述吧。當然這個資料集是dict格式(可以花時間了解一下字典格式) from sklearn...

theneo ‧ 2018-10-17

2 Like 1 留言 29422 瀏覽

鐵人賽 Data Technology DAY 21

使用Python進行資料分析系列第 21 篇

技術 [Day21]Pandas就能輕易將資料視覺化！

今天是第21天了！前兩天說明了matplotlib是如何將資料視覺化的，今天就要來看看如何用Pandas就可以將資料視覺化！首先，先import import...

plusone ‧ 2018-01-09 ‧團隊i.m.a.c_wishing_well

1 Like 1 留言 70692 瀏覽

鐵人賽 Data Technology DAY 12

使用Python進行資料分析系列第 12 篇

技術 [Day12]Pandas處理字串資料！（上）

嗨，今天是比賽的第12天，也是2017的最後一天，跨年還要寫這個真的是難過。那來說一下字串的資料是如何處理、可以如何處理吧！這邊我會將處理字串分成上、下兩個部分...

plusone ‧ 2017-12-31 ‧團隊i.m.a.c_wishing_well

5 Like 1 留言 171088 瀏覽

鐵人賽 Data Technology DAY 10

使用Python進行資料分析系列第 10 篇

技術 [Day10]Pandas Groupby使用！

嗨！今天是第十天了，沒想到自己竟然撐到1/3了，還記得我們在上一篇說明了索引的各種設定運用，接下來就來聊聊Groupby是什麼吧！ Splitting the...

plusone ‧ 2017-12-29 ‧團隊i.m.a.c_wishing_well

5 Like 1 留言 274012 瀏覽

鐵人賽 Data Technology DAY 9

使用Python進行資料分析系列第 9 篇

達標好文技術 [Day09]Pandas索引的運用！

上一篇說明了運用不同的方式做資料的過濾，透過過濾不需要的資料進而取出我們所要的資料，接下來要來嘗試索引（index）的更多使用的方法！將column變成ind...

plusone ‧ 2017-12-28 ‧團隊i.m.a.c_wishing_well

3 Like 5 留言 223449 瀏覽

鐵人賽 Data Technology DAY 8

使用Python進行資料分析系列第 8 篇

達標好文技術 [Day08]Pandas資料的取得與篩選！

嗨，今天第八天了，最喜歡8這個數字了！（題外）上一篇說明了如何讀取檔案還有pandas內的函式，包含查看資料內容、資料選擇、新增、刪除、空白填充以及排序。pan...

plusone ‧ 2017-12-27 ‧團隊i.m.a.c_wishing_well

7 Like 2 留言 202156 瀏覽

鐵人賽 Data Technology DAY 7

使用Python進行資料分析系列第 7 篇

達標好文技術 [Day07]Pandas操作資料的函數！

嗨嗨！第七天了，上一篇提介紹了python內的一個套件pandas內兩個重要的資料結構，可以到這邊回顧：[Day06]Pandas的兩種資料類型！接下來要會介...

plusone ‧ 2017-12-26 ‧團隊i.m.a.c_wishing_well

4 Like 0 留言 28170 瀏覽

鐵人賽 Data Technology DAY 5

使用Python進行資料分析系列第 5 篇

技術 [Day05]聊聊重要的三個package吧！

嗨，來到第五天啦！在昨天終於放晴了是好天氣呢！第四天與第三天我們學會了怎麼使用python，要開始資料分析的部分了。今天，這個美好的平安夜來聊聊python數據...

plusone ‧ 2017-12-24 ‧團隊i.m.a.c_wishing_well

1 Like 0 留言 41077 瀏覽

鐵人賽 AI & Machine Learning DAY 14

玩轉資料與機器學習-以自然語言處理為例系列第 14 篇

技術 Pandas(Python中的Excel)Day4-DataFrame的新增、迴圈與刪除

提醒: 本篇文章的code在這裡: Titanic 新增資料新增資料有兩種可能的意思: 要新增column或是要新增row，在pandas可透過concat完...

王選仲(GoatWang) ‧ 2017-12-19

0 Like 0 留言 25522 瀏覽

鐵人賽 AI & Machine Learning DAY 13

玩轉資料與機器學習-以自然語言處理為例系列第 13 篇

技術 Pandas(Python中的Excel)Day3-DataFrame的索引與更新

提醒: 本篇文章的code在這裡: Titanic DataFrame的索引 pandas好用的原因其中之一就是其索引的功能非常強大，相比於sql語法要敲一長串...

王選仲(GoatWang) ‧ 2017-12-18

0 Like 0 留言 8548 瀏覽

鐵人賽 AI & Machine Learning DAY 12

玩轉資料與機器學習-以自然語言處理為例系列第 12 篇

技術 Pandas(Python中的Excel)Day2-DataFrame的資料描述與屬性

前言接下來為了讓大家有實際操作的機會，我將以kaggle中Titanic練習資料集作為示範，詳細的內容請自行詳閱比賽中的資料介紹頁面。另外，由於後續的文章應該...

王選仲(GoatWang) ‧ 2017-12-17

0 Like 0 留言 14603 瀏覽

鐵人賽 AI & Machine Learning DAY 10

玩轉資料與機器學習-以自然語言處理為例系列第 10 篇

技術 Pandas(Python中的Excel)Day1-資料類型與讀寫檔案

前言 Pandas作為Python最強大的表格處理工具，其操作上非常簡單、方便，也很彈性。所謂簡單，指初學寫程式的人也容易快速上手。所謂方便，指程式碼很短、很簡...

王選仲(GoatWang) ‧ 2017-12-15

5 Like 1 留言 27439 瀏覽

鐵人賽 Big Data DAY 17

R 語言使用者的 Python 學習筆記系列第 17 篇

技術 [第 17 天] 資料角力

我們現在面對表格式資料（Tabular data），Excel 試算表，JSON 或者網頁資料時有了相當程度的自信，透過 pandas、requests 與 B...

tonykuoyj ‧ 2016-12-17

2 Like 0 留言 34318 瀏覽

鐵人賽 Big Data DAY 15

R 語言使用者的 Python 學習筆記系列第 15 篇

技術 [第 15 天] 載入資料

截至目前為止我們在學習筆記練習的資料結構，不論是 Python 內建的 list，tuple 或 dictionary，還是引用 numpy 套件與 panda...

tonykuoyj ‧ 2016-12-15

7 Like 0 留言 184754 瀏覽

鐵人賽 Big Data DAY 14

R 語言使用者的 Python 學習筆記系列第 14 篇

達標好文技術 [第 14 天] 常用屬性或方法（3）Data Frame

除了 Python 基本的資料結構（list，tuple 與 dictionary）以及昨天學習筆記提到的 ndarray，還記得我們在 [第 06 天] 資料...

tonykuoyj ‧ 2016-12-14

2 Like 0 留言 44151 瀏覽

鐵人賽 Big Data DAY 6

R 語言使用者的 Python 學習筆記系列第 6 篇

技術 [第 06 天] 資料結構（3）Data Frame

截至 2016-12-06 上午 7 時第 8 屆 iT 邦幫忙各組的鐵人分別是 46、8、12、12、6 與 58 人，我們想要用一個表格來紀錄參賽的組別與鐵...

tonykuoyj ‧ 2016-12-06