場(chǎng)景

豬肉價(jià)格網(wǎng)站：

http://zhujia.zhuwang.cc/

?

注：

博客：
https://blog.csdn.net/badao_liumang_qizhi
關(guān)注公眾號(hào)
霸道的程序猿
獲取編程相關(guān)電子書、教程推送與免費(fèi)下載。

實(shí)現(xiàn)

使用谷歌瀏覽器打開F12，刷新下當(dāng)前網(wǎng)頁，找到Network下的XHR下的Headers，將此信息復(fù)制出來。

刷新后會(huì)在左邊顯示請(qǐng)求Json數(shù)據(jù)的接口

?

點(diǎn)擊左邊的接口，右邊查看RequestURL,并在新窗口中打開

?

就可以看到關(guān)于豬肉價(jià)格的Json數(shù)據(jù)了

?

怎樣在代碼中獲取這些Json數(shù)據(jù)以方便后續(xù)的數(shù)據(jù)分析等那？

新建pig.py

import requests import jsonheaders = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.97 Safari/537.36'}def get_json(url):try:response = requests.get(url,headers=headers)if response.status_code == 200:json_text=response.json()return json_textexcept Exception:print('獲取json接口有問題！')return Nonejson_data = get_json('http://zhujia.zhuwang.cc/index/api/chartData?areaId=370000&aa=1573300145544')# 將dict格式數(shù)據(jù)轉(zhuǎn)換成json格式字符串 dump_data = json.dumps(json_data)# 將json格式字符串轉(zhuǎn)換成對(duì)應(yīng)的python值 load_data = json.loads(dump_data)# 打印轉(zhuǎn)換結(jié)果 print(type(json_data)) print(type(dump_data)) print(type(load_data),load_data)

其中headers就是上面在瀏覽器中復(fù)制出來的headers。

運(yùn)行結(jié)果

?

總結(jié)

以上是生活随笔為你收集整理的Python爬取猪肉价格网并获取Json数据的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。