python 爬蟲後寫入json檔中，可以將寫入的資料自動變成json檔的格式嗎?

python 爬蟲 json

tony20030201 2022-10-27 11:05:47 ‧ 1500 瀏覽

分享至

如題，想請問python爬蟲後寫入到json檔中，可以將寫入的資料自動變成json檔的格式嗎?
還是要自己手動讓他變成json格式

自己是有試過，但寫出來就跟一般的txt檔一樣，不知道是我沒找到方法，還是真的不行，需要手動調整成json的格式

看更多先前的討論...收起先前的討論...

woeichern iT邦新手 1 級 ‧ 2022-10-27 11:35:57 檢舉

樓主指的格式是檔案格式還是內容格式？

player iT邦大師 1 級 ‧ 2022-10-27 12:20:26 檢舉

誰知道你爬到什麼東西？如果抓下來的不是JSON，那通常要自己轉換。
HTML或CSV或XML，不會自動變成JSON。

tony20030201 iT邦新手 4 級 ‧ 2022-10-27 15:49:13 檢舉

我指的是內容格式

tony20030201 iT邦新手 4 級 ‧ 2022-10-27 15:51:33 檢舉

我抓的不是json，是HTML。

chan15 iT邦新手 2 級 ‧ 2022-10-28 09:25:20 檢舉

json 是一種 object 格式，你只要把抓取的內容轉成 object 的格式就可以存成 .json 啦

登入發表討論

直播研討會

{{ item.channelVendor }} {{ item.webinarstarted }} |

直播中

2 個回答

japhenchen

iT邦超人 1 級 ‧ 2022-10-27 11:15:53

import json

a1 = {'name' : 'japhen' , 'address' : 'myhome' }
a2 = {'name' : 'mary' , 'address' : 'herhome' }
b = [a1,a2] 
jsonstr = json.dump(b)
print(jsonstr)

回應
分享
檢舉

登入發表回應

jimce

iT邦新手 5 級 ‧ 2022-10-28 23:29:14

把資料存成DataFrame後
執行 DataFrame.to_json 自動就會轉成json格式

回應 1
分享
檢舉

tony20030201 iT邦新手 4 級 ‧ 2022-10-28 23:42:01 檢舉

原來如此，謝謝你的建議

登入發表回應

我要發表回答

立即登入回答

參賽組數

1064 組

團體組數

40 組

累計文章數

22199 篇

完賽人數

602 人

15th鐵人賽 16th鐵人賽 13th鐵人賽 14th鐵人賽 12th鐵人賽 11th鐵人賽鐵人賽 2019鐵人賽 javascript 2018鐵人賽 python 2017鐵人賽 windows php c# windows server linux css react vue.js

IT邦幫忙