iT邦幫忙

鐵人檔案

2013 iT 邦幫忙鐵人賽
回列表

用python擷取網頁上的開放資訊(數據資料),分析及畫出圖表 系列

網路之中充滿了各種各樣的資料,有些數字會引起人們的好奇,適當的藉由程式語言的幫忙,分析比較差異,一方面解決疑惑,一方面滿足好奇心,整理好的數字也可以分享給朋友,一舉數得。
除了程式碼之後,還有圖和表。

參賽天數 21 天 | 共 22 篇文章 | 11 人訂閱 訂閱系列文 RSS系列文
DAY 21

Scrapy(二):實作上的一些議題討論

1。目前尚不支援python3, 所以中文顯示比較多一點手續 2。可以把抓網的邏輯放在一個目錄下。 3。抓下的data可以放在一個items.py裏集中管理 4...

2013-10-17 ‧ 由 timloo 分享
DAY 21

Scrapy(三):學XPATH的好工具:Scrapy Shell及將爬得的資料寫回SQLITE3

1。下XPATH指令, 馬上看到過濾後的結果,即時的效果,提高效率。 2。用框架,或不用框架,隨著想抓的資料愈來愈多,這時原來沒有規畫過的問題,就浮現了。 用了...

2013-10-20 ‧ 由 timloo 分享