Scrapy爬虫-win7下创建运行项目
生活随笔
收集整理的這篇文章主要介紹了
Scrapy爬虫-win7下创建运行项目
小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
開始的時(shí)候,我只安裝了python3.5,安裝不了scrapy庫,網(wǎng)上搜了一下說是scrapy不支持python3.x
然后,我就又安裝了python2.7
為了,默認(rèn)使用2.7,我在環(huán)境變量path中添加下面2項(xiàng):
D:\Program Files\Python27;D:\Program Files\Python27\Scripts;?
接著,我在E:\PycharmProjects目錄下按住Shift鍵右擊,選擇“在此處打開命令窗口”,輸入以下命令:
scrapy startproject tutorial?
得到:
?
?
然后,在pycharm中open項(xiàng)目
scrapy.cfg:項(xiàng)目的配置文件
tutorial/:項(xiàng)目的Python模塊,將會(huì)從這里引用代碼
tutorial/items.py:項(xiàng)目的items文件
tutorial/pipelines.py:項(xiàng)目的pipelines文件
tutorial/settings.py:項(xiàng)目的設(shè)置文件
tutorial/spiders/:存儲爬蟲的目錄
?
運(yùn)行爬蟲顯示報(bào)錯(cuò)
ImportError: No module named win32api
需要導(dǎo)入
pip install pypiwin32
轉(zhuǎn)載于:https://www.cnblogs.com/zhouwp/p/8308772.html
總結(jié)
以上是生活随笔為你收集整理的Scrapy爬虫-win7下创建运行项目的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: IntelliTest实战直通车(上集)
- 下一篇: Mybatis 逆向工程 自动生成代码