技術 Day8：基於 Ensembl Gene ID 構建基因詳細頁面的 URL

今天我要建構基因詳細頁面的 URL 模板，用以後續爬蟲。 在進行網頁爬蟲時，必須準確的知道要爬取的網頁之 URL 構建方式；今天我將使用每個基因的 Ensemb...

技術 Day6：清理數據並驗證基因代號轉換結果

今天主要著重在清理轉換後的數據，並進行驗證。 基因代號轉換後，我需要對結果進行清理和驗證，因為有些基因雖然有 Symbol ID，但其在 Ensembl 上並未...

技術 Day7：理解 Ensembl 網站的基因詳細頁面結構

今天我將專注於理解 Ensembl 網站上基因詳細頁面的結構，這對於後續爬取基因的起始和結束位置至關重要。在 Ensembl 網站的基因詳細頁面中，包含了基因的...

技術 Day11：儲存解析結果並進行驗證

在成功爬取和解析基因的起始與結束位置之後，我需要將這些數據保存下來，並進行驗證，以確保數據完整且無誤，今天的目標是將解析出的基因位置信息儲存到一個 Excel...

技術 Day9：非同步爬蟲爬取基因詳細頁面

在處理大量基因數據時，使用同步爬蟲效率會很低，因此今天我將使用 aiohttp 來執行非同步爬蟲，這樣可以加速數據抓取過程。非同步爬蟲允許同時發送多個請求，而不...