技術 PTT 爬蟲

前言 良葛格過世的消息對我來說十分衝擊，筆者從國中開始學 C 語言，就是一路看良哥的筆記長大，乃至於後來學的 Java, Python 以及很多軟體設計的思維都...

技術 [Java]手把手帶你實作PTT爬蟲(2)-文章內容及儲存

前言 上一篇教學實作了一個簡單的爬蟲並成功的爬到了 PTT 的文章列表 這次就繼續將 PTT 文章內容給爬回來然後儲存到電腦上 必備知識 上一篇所列的知識 多...

達標好文 技術 [Java]手把手帶你實作PTT爬蟲(1)-文章列表

前言 好幾年前寫過一篇 Java 的爬蟲文章，好像是我部落格內最受歡迎的一篇... 時過境遷，Eclipse 退流行了、Java 出到 15 了，加上一些因素...

技術 練習2：用Session和cookie以get方式通過18歲同意條款頁面

可以先來看到 https://www.ptt.cc/ask/over18 的驗證頁面： 按下我同意後就會跳轉至主頁，可以看到表單是以POST的形式傳送，確認預...

技術 練習1: 用BeautifulSoup和requests模組爬取ptt熱門看板標題

筆者很廢...所以還請看到這篇練習文的大佬嘴下留情 :) 先確認BeautifulSoup4已經安裝了，若是還沒請： pip3 install beautifu...

技術 Day 13：小天地裡的遊戲 (上集)

前面講完了標記器介面的開發，接下來就是要說明我們要標記的文章特性，因為文章太多類型，也有很多“雜訊”，怎麼選出有價值的文章變得相對重要。 在前幾天的文章中我們有...

技術 Day 10：真正的工人智慧上線 .. 前

我們在之前一直提到，要用 PTT 文章來找出一些股市訊號，那文章怎麼找出一些特地的訊息，其實有蠻多種方式可以進行。第一種就是純文字的部分，可以用 “語意理解”、...

技術 Day 05 : 先來當個爬蟲

前面提到了我們要使用 PTT 的文章當作資料集，所以今天就來教大家怎麼當個爬蟲抓資料。 相信大家直接 Google “文章爬蟲”會找到許多教學文件，也有許多現有...

技術 Day 04：Let’s GO

前面三篇都在講概念跟初步驗證，到了這裡終於要進入開發的部分。今天會把之後開發上使用到的程式語言與平台等相關資訊做一次說明，並依序寫上總共需要開發哪些 func...

技術 Day 03： 高手真的在民間

為什麼會選擇 PTT 文章來做實驗？如果你常看股市版，或許你會覺得有跟我一樣的感覺。 有人常說股版是反指標，作為一個攻城獅(工程師)兼分析屍(分析師)，我們要有...

技術 Day 01： 工人智慧

PTT 是台灣最大的電子佈告欄(bbs)，常有笑話都說記者只要缺題材上PTT上找就好。不只是找新聞，連發大財的機會都有可能，其實 .. 這是真的 !! 相信大...

技術 [Day 5] 我的PTT哪有這麼不安全

昨天介紹了使用HTTP協定的網頁是沒有加密的，所以在使用HTTP協定的網頁中輸入帳號密碼等重要資料送出的話，很有可能造成資料外洩，而今天接著要介紹的是另外一個同...

技術 用IBM Bluemix開發，PTT「八卦通」也可打卡了-1/30

PTT八卦通：醞釀5年，開發只花1周 大家是鄉民舉個右 看到這消息，真的想不到BBS竟然能生存那麼久 我想也是另類的台灣奇蹟吧！ PTT下月將發表的「八卦通」功...

技術 什麼是PTT啊?

正在爬文學習中，知道的人就來指導一下吧。 最多人用的BBS軟體PCMAN：2011最新版 PCMAN+BBI 什麼是PTT開燈與關燈：BBS開燈教學 我連什麼是...