iT 邦幫忙::一起幫忙解決難題，拯救 IT 人的一天

1 Like 0 留言 3934 瀏覽

鐵人賽 Google Developers Machine Learning DAY 18

Python + 機器學習/深度學習小筆記系列第 18 篇

技術 [Day - 18]用Pandas快速爬取表格數據(期貨交易所為例-1)

以上圖為例 #Pandas主要用來作數據處理#Series 一維數據類型#DataFrame 二維數據類型 #read_html 抓取表格利用Pandas快...

unknown ‧ 2019-09-19

0 Like 0 留言 3918 瀏覽

鐵人賽 Microsoft Azure DAY 27

Python X 金融分析 X Azure 系列第 27 篇

技術【Day27】Ta Lib#2：線圖－KD線 part 2

本篇記錄一下，製作KD線踩到的雷。可參考github：Day26_createLine.ipynb 在製作的過程中，發現無法順利地轉換，於是參考：Pytho...

eyelash*睫毛 ‧ 2020-10-05

0 Like 0 留言 3645 瀏覽

鐵人賽 AI & Data DAY 28

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 28 篇

技術 Day28 BS4: Scrape from Youtube 2/2 用美麗的湯爬取Youtube 2/2

延續昨日的文章，今天要把Berge的Youtube搜尋頁面縮圖連結存下來。Today we will continue last article to scra...

kyt ‧ 2019-09-29

2 Like 0 留言 3604 瀏覽

技術 Python: pandas + gpt3.5 用一句話讓 LLM 分析數據

介紹 pandas-ai 是一個開源套件，能夠讓使用者用 Prompt 的方式請 LLM 幫忙分析 DataFrame (等價於excel) 裡面的數據。使用...

Pythonist ‧ 2023-10-19

0 Like 0 留言 3269 瀏覽

鐵人賽 Python DAY 2

30 天學會用 Python pandas 和 openpyxl 處理 Excel —— 成為用 Python 處理 Excel 檔案的高手系列第 2 篇

技術 Python pandas 讀取 Excel 檔案【Python 處理 Excel #2】

本篇文章同步發布於 Python pandas 讀取 Excel 檔案【Python 處理 Excel #2】前言想用 Python 處理 Excel...

april ‧ 2024-09-15

0 Like 1 留言 3267 瀏覽

鐵人賽自我挑戰組 DAY 25

從HTML到Python爬蟲的30天之旅系列第 25 篇

技術 Day 25：專案06 - 股市趨勢圖02 | 整年股市資料、Postman

複習一下昨天的進度 - 我們取得單月的個股日成交價的資料，並在電腦中儲存成csv檔。目前都只有單月的個股日成交價，但如果想要一整年的個股日成交價時，該怎麼辦呢...

Andy Chiang ‧ 2021-09-30

0 Like 0 留言 3196 瀏覽

鐵人賽 AI & Data DAY 25

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 25 篇

技術 Day25 Beautiful Soup Try Out: Stepstone Posting 美麗的湯爬蟲初體驗：達石職缺

初次嘗試使用美味的湯爬資料，先做小一點的試試水。今天是從德國求職網站達石來下載職缺列表，先試看看不翻頁只爬第一頁100筆職缺訊息。Today is my fir...

kyt ‧ 2019-09-26

0 Like 0 留言 3129 瀏覽

鐵人賽 AI & Data DAY 3

資料三十-那些最基本的資料處理與分析技能系列第 3 篇

技術【Day03-表格】為什麼熊貓(pandas)是用來處理表格的工具？

前兩天我們稍微說明了一下對於看待資料的一些基本觀念那今天就來開始實際對資料做一些操作吧環境需求： python程式環境程度需求：對python有基...

owo ‧ 2021-09-18

0 Like 0 留言 2990 瀏覽

鐵人賽自我挑戰組 DAY 2

用程式鳥瞰股市系列第 2 篇

技術 Day 2 股市每五秒指數爬蟲

第二天啦~ 今天要講的是如何實作爬蟲，爬台股每五秒指數的歷史資訊。第一步先到 https://www.twse.com.tw/zh/page/trading...

Kurt ‧ 2020-09-15

0 Like 0 留言 2877 瀏覽

鐵人賽自我挑戰組 DAY 6

Python資料分析學習地圖系列第 6 篇

技術 Day 06 : 資料處理 Pandas (2)

今天接著介紹 pandas 如何表對資料表合併、資料匯總等等進階用法！資料表合併 inner join 假設有X表和Y表，我們想要取兩邊都有的資料，就會用到...

皮卡丘打排球 ‧ 2021-09-18

0 Like 0 留言 2877 瀏覽

鐵人賽 AI & Data DAY 8

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 8 篇

技術 Day08 Basic Data Visualizations with Pandas 1/2. Pandas視覺化資料基礎 1/2

接下來五篇文章介紹一些視覺化資料的工具與功能，挑選不同類型的圖來說明。今天來討論Pandas中一些基本的資料視覺化功能。The following 5 arti...

kyt ‧ 2019-09-09

0 Like 0 留言 2595 瀏覽

鐵人賽 AI & Data DAY 9

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 9 篇

技術 Day09 Basic Data Visualizations with Pandas 2/2. Pandas視覺化資料基礎 2/2

# 載入所需套件 import packages import pandas as pd import numpy as np 圓餅圖 Pie Plot 圓餅...

kyt ‧ 2019-09-10

0 Like 0 留言 2513 瀏覽

鐵人賽 AI & Data DAY 26

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 26 篇

技術 Day26 Stepstone Posting 達石職缺

# 載入所需套件 import the packages we need import pandas as pd import numpy as np im...

kyt ‧ 2019-09-27

0 Like 0 留言 2463 瀏覽

鐵人賽 Python DAY 4

30 天學會用 Python pandas 和 openpyxl 處理 Excel —— 成為用 Python 處理 Excel 檔案的高手系列第 4 篇

技術 Python pandas 增加 DataFrame 欄位以及 apply 用法【Python 處理 Excel #4】

本篇文章同步發布於 Python pandas 增加 DataFrame 欄位以及 apply 用法【Python 處理 Excel #4】前言這篇文章...

april ‧ 2024-09-17

1 Like 0 留言 2458 瀏覽

鐵人賽 Python DAY 30

30 天學會用 Python pandas 和 openpyxl 處理 Excel —— 成為用 Python 處理 Excel 檔案的高手系列第 30 篇

技術《30 天學會用 Python pandas 和 openpyxl 處理 Excel》系列文回顧與總結【Python 處理 Excel #30】

本篇文章同步發布於《30 天學會用 Python pandas 和 openpyxl 處理 Excel》系列文回顧與總結【Python 處理 Excel #...

april ‧ 2024-10-13

0 Like 0 留言 2363 瀏覽

鐵人賽 Python DAY 15

30 天學會用 Python pandas 和 openpyxl 處理 Excel —— 成為用 Python 處理 Excel 檔案的高手系列第 15 篇

技術使用 Python pandas 的 groupby 實現類似 Excel 樞紐分析的功能【Python 處理 Excel #15】

本篇文章同步發布於使用 Python pandas 的 groupby 實現類似 Excel 樞紐分析的功能【Python 處理 Excel #15】前...

april ‧ 2024-09-28

1 Like 0 留言 2342 瀏覽

技術 Python學習筆記: Pandas 難字造字檔以全字庫取代

本文同步發表於小弟自架網站：微確幸資訊站全字庫網址：https://www.cns11643.gov.tw/ 各單位通常都有難字造字檔，但個別造字檔在彼此交換...

mackuo ‧ 2022-12-01

0 Like 0 留言 2329 瀏覽

鐵人賽 Python DAY 12

30 天學會用 Python pandas 和 openpyxl 處理 Excel —— 成為用 Python 處理 Excel 檔案的高手系列第 12 篇

技術 Python pandas 使用 iterrows 逐一更新資料【Python 處理 Excel #12】

本篇文章同步發布於 Python pandas 使用 iterrows 逐一更新資料【Python 處理 Excel #12】前言如果更新資料的過程需要...

april ‧ 2024-09-25

0 Like 0 留言 2204 瀏覽

鐵人賽 Google Developers Machine Learning DAY 20

Python + 機器學習/深度學習小筆記系列第 20 篇

技術 [Day - 20]Pandas數據清洗和處理

淺層的數據分析:發現規律，對比。數據清洗(pandas) 深層的數據分析(機器學習):對未來做出預測。數據清洗(pandas)，數據處理(pandas) im...

unknown ‧ 2019-09-21

0 Like 0 留言 2197 瀏覽

鐵人賽 AI & Data DAY 29

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 29 篇

技術 Day29 Scraping from IMDb with Selenium 1/2 用Selenium爬取IMDb 1/2

先來看電影評分網站IMDb資料長相，抓取需要的資訊存起來，程式碼是參考自這篇文章。Take a look at how IMDb save the movie...

kyt ‧ 2019-09-30

0 Like 0 留言 2040 瀏覽

鐵人賽 AI & Data DAY 30

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 30 篇

技術 Day30 Scraping from IMDb with Selenium 2/2 用Selenium爬取IMDb 2/2

本篇文章是使用Chrome瀏覽器搭配Selenium爬取電影評分網站IMDb資料，一些前置作業如下：先進到這個網站確定目前所使用的Chrome版本。到Ch...

kyt ‧ 2019-10-01

0 Like 0 留言 2035 瀏覽

技術 Python學習筆記: Pandas MultiIndex (多重索引)簡要說明

本文同步發表於小弟自架網站：微確幸資訊站資料範例是索引共有四層（0-3層)，分別為['學年', '學期', '學制', '性別']學年：108, 109學期：...

mackuo ‧ 2022-12-14

0 Like 0 留言 1982 瀏覽

鐵人賽自我挑戰組 DAY 5

Pandas｜資料前處理工具系列第 5 篇

技術 Day 5｜檔案路徑與存取外部資料

　　Pandas 的優勢在於可以處理大型數據，方便使用者觀察和分析，但處理數據前需要先載入資料，因此，本文將說明如何透過檔案路徑讀取外部資料，內容包含：介紹...

Eva ‧ 2023-09-20

0 Like 0 留言 1981 瀏覽

鐵人賽 Software Development DAY 9

金融分析 X Python－訊號燈系列第 9 篇

技術【D9】取得加權指數歷史資料

前言認為整體環境看多，優秀的個股不會太差；大環境不好，優秀的股票也會被拖累。有這個概念後我們取得三大法人的留倉作為判斷依據，但這個判斷依據是不是可以跟市場趨勢...

eyelash*睫毛 ‧ 2021-09-09

0 Like 0 留言 1966 瀏覽

鐵人賽 Software Development DAY 13

金融分析 X Python－訊號燈系列第 13 篇

技術【D13】取得：加權指數歷史資料，並觀察量與指數的關係

前言昨天取得九月的加權指數資料，但是時間太短，看不出來量與價格的關係，所以就要取得更遠的資料囉。取得後才能觀察量與指數的關係。本日程式碼使用： d13...

eyelash*睫毛 ‧ 2021-09-13

0 Like 0 留言 1951 瀏覽

鐵人賽 Software Development DAY 7

金融分析 X Python－訊號燈系列第 7 篇

技術【D7】取得歷史資料：三大法人-區分期貨與選擇權二類

前言在昨日取得的資料僅有當天的資訊，政府有提供下載近三年的資料，更多就需要申請，不過我們這三年已經夠用了。讓我們取得這段時間的歷史資料吧！本日程式碼使用：...

eyelash*睫毛 ‧ 2021-09-07

1 Like 0 留言 1906 瀏覽

鐵人賽 Google Developers Machine Learning DAY 19

Python + 機器學習/深度學習小筆記系列第 19 篇

技術 [Day - 19]用Pandas快速爬取表格數據(期貨交易所為例-2)

使用request請求呼叫接著利用BeautifulSoup的html解析器解析html使用CSS選擇器去選取目標table 接著再利用選取好的部分html直...

unknown ‧ 2019-09-20

0 Like 0 留言 1896 瀏覽

鐵人賽自我挑戰組 DAY 17

Pandas｜資料前處理工具系列第 17 篇

技術 Day 17｜資料合併的三種常用語法

　　在茫茫數據海當中，資料散布在各種不同的地方，可能是資料庫、網站、文件等，為了要有效統一資料集，方便後續的分析和報告，資料合併的操作是不可不學的，以下將以案例...

Eva ‧ 2023-10-02

0 Like 1 留言 1894 瀏覽

鐵人賽 Software Development DAY 4

金融分析 X Python－訊號燈系列第 4 篇

技術【D4】匯入交易資料

前言這是需要調整資料庫連線資訊，修改成符合MySQL的格式。本次也會參考《【Day10】Azure資料庫#2：建立SQL server資料表》以及《【Day1...

eyelash*睫毛 ‧ 2021-09-04

1 Like 0 留言 1885 瀏覽

技術 Python學習筆記: Pandas 依程式執行當下日期篩選資料

本文同步發表於小弟自架網站：微確幸資訊站來源：讀取covid-19確診名單（姓名源自於中文姓名產生器），居隔日期均為杜撰。 from io import St...

mackuo ‧ 2023-03-12