python爬虫实例之一
生活随笔
收集整理的這篇文章主要介紹了
python爬虫实例之一
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
好久沒有寫博客了,之前做的項目也沒有上傳,今天來一波記錄:
使用XMLFeedSpider分析XML源? 進行爬蟲
爬取新浪博客的訂閱地址XML中的文章標題、對應鏈接、作者等信息,使用Scrapy框架進行爬取
最終運行結果如下圖:
此處主要記錄下該過程中遇到的問題:
在命令行中輸入scrapy crawl myxmlspider --nolog時出現了一錯誤:unhandled error in defered
百度了下主要是沒有安裝pywin32這個庫,所以需要根據python版本以及系統版本安裝該庫,我用的是python3.5 windows64位操作系統,所以安裝了pywin32 forpython3.5 amd64的whl使用pip命令安裝,安裝文件下載地址http://download.csdn.net/download/u013612883/9713280(只有64位python3.5的其余版本上網搜索)
總結
以上是生活随笔為你收集整理的python爬虫实例之一的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 10 | 递归:如何用三行代码找到“最终
- 下一篇: python爬虫实例(百度图片、网站图片