微博json文件_python 爬取微博评论 !
嚶嚶嚶,寫的時候剛好在放這首歌就順手點上去了。
內容僅供學習參考!!!
一 . 介紹
微博:
(1)網頁端:http://http://weibo.com
(2)手機端:http://http://m.weibo.cn
(3)移動端:http://weibo.cn
以下是三種方式的頁面:
爬取難度:網頁端>手機端>移動端(頁面最丑,最好爬)
Python學習交流群:1004391443,這里有資源共享,技術解答,還有小編從最基礎的Python資料到項目實戰的學習資料都有整理,希望能幫助你更了解python,學習python。
!!!本文選取難度適中的手機端。
二. 分析
因為微博是動態加載的,所以下拉頁面就會出url是不同的,我們需要做到找到共同的規律。
發現max_id的值不同,max_id_type也是不同的
而max_id和max_id_type在返回的json文件里面有出現。
所以此處URL是由https://m.weibo.cn/comments/hotflow?用戶id&midid&max_id&max_id_type組成
獲取相關數據層層“撥開”
如獲取評論者“昵稱”
data_name=html.json()['data']['data'][0]['user]['screen_name']
三. 程序
四. 結果
五. 我只是學習的搬運工,堅信1000小時定律。
記錄學習,排版令人絕望
總結
以上是生活随笔為你收集整理的微博json文件_python 爬取微博评论 !的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: python自学行_怎么自学python
- 下一篇: python四大高阶函数_详谈Pytho