Python爬虫西安七天天气预报
生活随笔
收集整理的這篇文章主要介紹了
Python爬虫西安七天天气预报
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
剛剛學習了正則表達式,所以準備試著寫一個爬蟲,作為練習~~
首先,在網頁搜索西安七天天氣預報,點開頁面。我找到的網頁如下圖:
此時,我們按Fn+F12,獲取爬蟲需要的url
獲取到相應的url后,便可以進行代碼,先獲取頁面文本進行查看。
顯然,獲取信息失敗,這是需要進行處理,這是由于該頁面設置了反爬蟲的原因。這時我們需要構造偽頭部。
查找Host和User-Agent兩項,修改代碼。
這樣,便可以讀取到整頁的前端代碼,接下來我們就是用正則表達式進行文字的提取
最后,我們完善代碼,將提取的數據加載到表格中,完整代碼以及運行結果如下圖:
嗯呢~~就是這樣啦!
總結
以上是生活随笔為你收集整理的Python爬虫西安七天天气预报的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Python中正则表达式的分割和替换
- 下一篇: Python小说爬虫