達標好文 技術 Day8：Python requests + bs4 實作模擬登入網站並爬取資料｜Kearch 1.0 爬蟲關鍵字報表工具

上一篇我們用scrapy來爬Y Combinator Blog，它的結構不算太複雜，而且無須登入。但如果今天需要爬取需要登入的網站資料該怎麼做呢？我們可以用py...

技術 Day11：selenium 實作網站換頁爬蟲｜Kearch 1.0 爬蟲關鍵字報表工具

本專題爬蟲系列文章： Python scrapy 爬取 Y combinator BlogPython requests 模擬網站登入爬蟲Python req...

技術 Day12：Selenium webdriver 定位物件方法比較 xpath v.s. css selector｜Kearch 1.0 爬蟲關鍵字報表工具

本專題爬蟲系列文章： Python scrapy 爬取 Y combinator BlogPython requests 模擬網站登入爬蟲Python req...

技術 Day7： 實作Python Scrapy 20行內爬取Y Combinator Blog所有文章｜Kearch 1.0 爬蟲關鍵字報表工具

好，今天拿Y Combinator Blog的文章來小試爬蟲，我保證你會很有成就感 XD scrapy爬蟲開始 啟動虛擬環境、安裝確認 首先確保你有啟動剛剛創...

技術 Day9：ajax動態載入網頁爬蟲｜Kearch 1.0 爬蟲關鍵字報表工具

爬蟲系列文章整理： Python scrapy 爬取 Y combinator BlogPython requests 模擬網站登入爬蟲 今天示範如何爬取...

技術 Day14：Google Trends API (unofficial) 介紹及實作｜Kearch 1.0 爬蟲關鍵字報表工具

今天要帶大家認識Google Trends API。 Google Trends大家應該蠻熟悉，它可以查詢特定關鍵字在不同國家、不同時間點的搜尋熱度；通常被用來...

技術 Day10：無規律的動態載入網頁爬蟲神器—selenium 介紹及安裝｜Kearch 1.0 爬蟲關鍵字報表工具

Selenium是什麼，優缺點？ 它原先是用來測試網站使用，模擬用戶在瀏覽器的行為。優點是爬蟲的時候模擬自己的操作寫成一段script能節省非常多時間，缺點是每...

技術 Day5：NodeJS .ejs 模板載入json資料｜KeywordSearch 1.0 爬蟲關鍵字報表工具

之前我們是直接在index.js把資料吐進.ejs模板中；今天來試試如果是json資料怎麼做。 如果我們有大量的商品資訊，每樣商品都有品名、價位、描述等，這時我...

技術 Day6：安裝 Python Jupyter Notebook 及了解python scrapy｜KeywordSearch 1.0 爬蟲關鍵字報表工具

什麼是KeywordSearch 1.0 爬蟲關鍵字報表工具？是作者近期兩周實作出來的小專案，把不同關鍵字搜尋工具的api及部分爬蟲寫在nodejs App當...

技術 Day4：NodeJS req.query() 應用｜KeywordSearch 1.0 爬蟲關鍵字報表工具

什麼是KeywordSearch 1.0 爬蟲關鍵字報表工具？是作者近期兩周實作出來的小專案，把不同關鍵字搜尋工具的api及部分爬蟲寫在nodejs App當...

技術 Day1：NodeJS 基本安裝、環境設定、淺談Connect｜KeywordSearch 1.0 爬蟲關鍵字報表工具

什麼是KeywordSearch 1.0 爬蟲關鍵字報表工具？是作者近期兩周實作出來的小專案，結合不同關鍵字搜尋工具的api及部分爬蟲，讓使用者可以一鍵拿到搜...

技術 Day0：KeywordSearch 1.0 教學文概覽 + 核心功能(Selenium)前情提要

嗨大家好！我是阿寶，大概半年前開始碰前後端和Python，同時間相對擅長數位行銷、網站分析、社群經營等。最近因為被重要的老師啟蒙，而有了把行銷領域重複性的工作，...

技術 Day2：NodeJS 與 Express 4、route設定｜KeywordSearch 1.0 爬蟲關鍵字報表工具

什麼是KeywordSearch 1.0 爬蟲關鍵字報表工具？是作者近期兩周實作出來的小專案，把不同關鍵字搜尋工具的api及部分爬蟲寫在nodejs App當...

技術 Day3：關於middleware的小示範｜KeywordSearch 1.0 爬蟲關鍵字報表工具

什麼是KeywordSearch 1.0 爬蟲關鍵字報表工具？是作者近期兩周實作出來的小專案，把不同關鍵字搜尋工具的api及部分爬蟲寫在nodejs App當...

技術 新零售行銷模式案例，全通路時代來臨該如何佈局

新零售行銷模式案例，全通路時代來臨該如何佈局，一直以來都在擔任輔導顧問為中小企業解決網路行銷問題但都發現目前的中小企業都只想上網盡快有訂單卻呼略了本質及產品的優...