iT 邦幫忙::一起幫忙解決難題，拯救 IT 人的一天

1 Like 0 留言 14822 瀏覽

鐵人賽 Software Development DAY 28

糊裡糊塗Python就上手系列第 28 篇

技術 [2020鐵人賽Day28]糊裡糊塗Python就上手-Pandas的觀念與運用(上)

今日目標學習了解 Python Pandas 的觀念與運用 What is Pandas? Pandas 是基於 Numpy 開發的模組，該模組是為了解決結構...

Old Siao ‧ 2020-10-13 ‧團隊迷途羔羊

0 Like 0 留言 3323 瀏覽

鐵人賽 Microsoft Azure DAY 27

Python X 金融分析 X Azure 系列第 27 篇

技術【Day27】Ta Lib#2：線圖－KD線 part 2

本篇記錄一下，製作KD線踩到的雷。可參考github：Day26_createLine.ipynb 在製作的過程中，發現無法順利地轉換，於是參考：Pytho...

eyelash*睫毛 ‧ 2020-10-05

0 Like 0 留言 4177 瀏覽

鐵人賽 Microsoft Azure DAY 26

Python X 金融分析 X Azure 系列第 26 篇

技術【Day26】Ta Lib：線圖－KD線

現在使用Ta-lib讓我們的資料可以開心的畫圖。可參考文章：https://www.finlab.tw/Python-簡單158種技術指標計算/ 可參考gith...

eyelash*睫毛 ‧ 2020-10-04

1 Like 0 留言 3682 瀏覽

鐵人賽 Microsoft Azure DAY 21

Python X 金融分析 X Azure 系列第 21 篇

技術【Day21】技術分析#2：均線下單策略

畫均線後，就要進行簡單的策略分析，用均線進行線性回測。可參考文章：利用pandas輕鬆取得歷史股本日的程式碼於：Day21_createMAStrategy....

eyelash*睫毛 ‧ 2020-09-29

0 Like 0 留言 4552 瀏覽

鐵人賽 Microsoft Azure DAY 20

Python X 金融分析 X Azure 系列第 20 篇

技術【Day20】技術分析：移動平均線（MA）

有了資料後，開始做技術分析。從每日的數據中，可以做出簡單的技術分析：移動平均線（Moving Average，MA），簡稱均線。可以藉由均線當作參考，簡單的判斷...

eyelash*睫毛 ‧ 2020-09-28

0 Like 0 留言 2887 瀏覽

鐵人賽 Microsoft Azure DAY 19

Python X 金融分析 X Azure 系列第 19 篇

技術【Day19】批次匯入證交所資料

我們已經取得證交所資料，但是在金融分析中，需要大量的歷史資料。總不能每次都ㄧ個月份一個月份的去新增吧？這次就是要用簡單的批次做法，把程式碼改寫方便我們更自動的取...

eyelash*睫毛 ‧ 2020-09-27

0 Like 0 留言 3446 瀏覽

鐵人賽 Microsoft Azure DAY 15

Python X 金融分析 X Azure 系列第 15 篇

技術【Day15】取當天交易資料

我們要正確地取得資料，可以使用政府的open data收集每天的資料。本篇會從政府資料開放平臺取得資訊作為範例。範例檔案在：Day15_getStockDat...

eyelash*睫毛 ‧ 2020-09-23

0 Like 0 留言 11001 瀏覽

鐵人賽 Microsoft Azure DAY 8

Python X 金融分析 X Azure 系列第 8 篇

技術【Day8】取得資訊－Python #4：使用pandas存成csv

在取得資料，並且做出圖表後，仍然需要把我們每次的資料儲存下來，這時候pandas就可以輕鬆建立資料的csv。廢話不多說，直接看這次的程式碼Day8_save...

eyelash*睫毛 ‧ 2020-09-16

0 Like 0 留言 2148 瀏覽

鐵人賽自我挑戰組 DAY 2

用程式鳥瞰股市系列第 2 篇

技術 Day 2 股市每五秒指數爬蟲

第二天啦~ 今天要講的是如何實作爬蟲，爬台股每五秒指數的歷史資訊。第一步先到 https://www.twse.com.tw/zh/page/trading...

Kurt ‧ 2020-09-15

0 Like 2 留言 8188 瀏覽

鐵人賽 Microsoft Azure DAY 6

Python X 金融分析 X Azure 系列第 6 篇

技術【Day6】取得資訊－Python #2：呈現（使用numpy、pandas）

已經取得資料了，但是這樣的顯示方式很不好閱讀，接著就是要介紹如何順利的結構化這些資料。本篇將會使用numpy和pandas。程式碼（完成程式碼在本段下方...

eyelash*睫毛 ‧ 2020-09-14

2 Like 0 留言 11808 瀏覽

技術 pandas 套件中 sample 的使用 - 對數據集進行抽樣或打散

函數：sample DataFrame.sample(n=None, frac=None, replace=False, weights=None, rando...

yaxuan ‧ 2020-09-11

2 Like 0 留言 10222 瀏覽

技術 [Python] 將Pandas table轉成圖檔

如題，最近工作關係，需要將結果匯出作為報告，因此上網查了下如何將pandas的table變成圖檔儲存 # 匯入庫 import matplotlib.pyplo...

a26833765 ‧ 2020-05-13

0 Like 0 留言 1390 瀏覽

鐵人賽 AI & Data DAY 30

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 30 篇

技術 Day30 Scraping from IMDb with Selenium 2/2 用Selenium爬取IMDb 2/2

本篇文章是使用Chrome瀏覽器搭配Selenium爬取電影評分網站IMDb資料，一些前置作業如下：先進到這個網站確定目前所使用的Chrome版本。到Ch...

kyt ‧ 2019-10-01

0 Like 0 留言 1808 瀏覽

鐵人賽 AI & Data DAY 29

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 29 篇

技術 Day29 Scraping from IMDb with Selenium 1/2 用Selenium爬取IMDb 1/2

先來看電影評分網站IMDb資料長相，抓取需要的資訊存起來，程式碼是參考自這篇文章。Take a look at how IMDb save the movie...

kyt ‧ 2019-09-30

0 Like 0 留言 2734 瀏覽

鐵人賽 AI & Data DAY 28

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 28 篇

技術 Day28 BS4: Scrape from Youtube 2/2 用美麗的湯爬取Youtube 2/2

延續昨日的文章，今天要把Berge的Youtube搜尋頁面縮圖連結存下來。Today we will continue last article to scra...

kyt ‧ 2019-09-29

0 Like 0 留言 3097 瀏覽

鐵人賽 AI & Data DAY 27

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 27 篇

技術 Day27 BS4 Scrape from Youtube 1/2 用美麗的湯爬取Youtube 1/2

今天嘗試來用美麗的湯從Youtube爬取影片標題、連結、觀看次數與簡介。爬取的資料是一個好聽德國樂團Berge的Youtube搜尋頁面(是想趁機推坑吧笑死)。T...

kyt ‧ 2019-09-28

0 Like 0 留言 1997 瀏覽

鐵人賽 AI & Data DAY 26

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 26 篇

技術 Day26 Stepstone Posting 達石職缺

# 載入所需套件 import the packages we need import pandas as pd import numpy as np im...

kyt ‧ 2019-09-27

1 Like 0 留言 8125 瀏覽

鐵人賽 Software Development DAY 11

Python 程式交易 30 天新手入門系列第 11 篇

技術 Day-11 資料保存：取得 2019 年每日加權指數盤後資訊並繪製線圖

安裝所需套件使用 pip 安裝 # 繪製圖表 pip install plotly 技術整合前情提要 Day-05 資料蒐集：取得代理清單 Day...

阿斬 ‧ 2019-09-26 ‧團隊Amos的推坑教2.0

0 Like 0 留言 1923 瀏覽

鐵人賽 AI & Data DAY 25

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 25 篇

技術 Day25 Beautiful Soup Try Out: Stepstone Posting 美麗的湯爬蟲初體驗：達石職缺

初次嘗試使用美味的湯爬資料，先做小一點的試試水。今天是從德國求職網站達石來下載職缺列表，先試看看不翻頁只爬第一頁100筆職缺訊息。Today is my fir...

kyt ‧ 2019-09-26

0 Like 0 留言 848 瀏覽

鐵人賽 AI & Data DAY 24

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 24 篇

技術 Day24 Airbnb in Berlin 5/5 the ring zone summary 柏林Airbnb 5/5 蛋黃區房源分析小結

今天針對前幾日視覺化的結果，來篩選一些符合我需求的房源。Today we will filter out some listings that fit my n...

kyt ‧ 2019-09-25

0 Like 0 留言 1273 瀏覽

鐵人賽 AI & Data DAY 23

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 23 篇

技術 Day23 Airbnb in Berlin 4/5 listings analysis 柏林Airbnb 4/5 蛋黃區房源分析

昨日(Day22)的文章中，先以低排放區郵遞區號篩選取出房源列表後排序，取房源數量最多的前十名(主要是柏林占地太大，Airbnb上劃分成了133個區，加上交通因...

kyt ‧ 2019-09-24

0 Like 0 留言 926 瀏覽

鐵人賽 AI & Data DAY 22

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 22 篇

技術 Day22 Airbnb in Berlin 3/5 the ring zone 柏林Airbnb 3/5 蛋黃區

到柏林旅遊，會發現市區交通票券由放射狀分為A、B、C三個區塊，想買長期票券分法只有A+B區、B+C區、A+B+C區，以一般旅遊民眾而言，移動範圍多會在A+B區，...

kyt ‧ 2019-09-23

0 Like 0 留言 1909 瀏覽

鐵人賽 Google Developers Machine Learning DAY 20

Python + 機器學習/深度學習小筆記系列第 20 篇

技術 [Day - 20]Pandas數據清洗和處理

淺層的數據分析:發現規律，對比。數據清洗(pandas) 深層的數據分析(機器學習):對未來做出預測。數據清洗(pandas)，數據處理(pandas) im...

unknown ‧ 2019-09-21

1 Like 0 留言 1367 瀏覽

鐵人賽 Google Developers Machine Learning DAY 19

Python + 機器學習/深度學習小筆記系列第 19 篇

技術 [Day - 19]用Pandas快速爬取表格數據(期貨交易所為例-2)

使用request請求呼叫接著利用BeautifulSoup的html解析器解析html使用CSS選擇器去選取目標table 接著再利用選取好的部分html直...

unknown ‧ 2019-09-20

0 Like 0 留言 2746 瀏覽

鐵人賽 Google Developers Machine Learning DAY 18

Python + 機器學習/深度學習小筆記系列第 18 篇

技術 [Day - 18]用Pandas快速爬取表格數據(期貨交易所為例-1)

以上圖為例 #Pandas主要用來作數據處理#Series 一維數據類型#DataFrame 二維數據類型 #read_html 抓取表格利用Pandas快...

unknown ‧ 2019-09-19

1 Like 0 留言 6055 瀏覽

鐵人賽 AI & Data DAY 12

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 12 篇

技術 Day12 Data Visualization Tools: Seaborn 視覺化資料工具：Seaborn

Seaborn是基於Matplotlib的Python繪圖庫，並有繪圖指令簡單、圖樣風格精美等優點。Seaborn is a Python visualizat...

kyt ‧ 2019-09-13

0 Like 0 留言 8630 瀏覽

鐵人賽 AI & Data DAY 11

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 11 篇

技術 Day11 Data Visualization Tools: Plotly 視覺化資料工具：Plotly

Plotly是使用Python和Django框架構建的，前端使用JavaScript和可視化庫D3.js，HTML和CSS。使用Plotly可以創建出許多精美的...

kyt ‧ 2019-09-12

0 Like 0 留言 1919 瀏覽

鐵人賽 AI & Data DAY 9

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 9 篇

技術 Day09 Basic Data Visualizations with Pandas 2/2. Pandas視覺化資料基礎 2/2

# 載入所需套件 import packages import pandas as pd import numpy as np 圓餅圖 Pie Plot 圓餅...

kyt ‧ 2019-09-10

0 Like 0 留言 2272 瀏覽

鐵人賽 AI & Data DAY 8

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 8 篇

技術 Day08 Basic Data Visualizations with Pandas 1/2. Pandas視覺化資料基礎 1/2

接下來五篇文章介紹一些視覺化資料的工具與功能，挑選不同類型的圖來說明。今天來討論Pandas中一些基本的資料視覺化功能。The following 5 arti...

kyt ‧ 2019-09-09

0 Like 1 留言 4971 瀏覽

鐵人賽 AI & Data DAY 7

Hands on Data Cleaning and Scraping 資料清理與爬蟲實作系列第 7 篇

技術 Day07 Pandas skills: Pandas cheat sheet. Pandas操作：快查表中文化

網路上有許多大神整理了各種快查表，本日進度就挑戰把其中一個個人覺得整理的很完善的快查表中文化。前兩天文章中提到的操作，都可以從這個快查表中查找。有需要的人歡迎下...

kyt ‧ 2019-09-08