scrapy的安裝與使用

1月份的時候就曾經安裝過scrapy,但是失敗了,python的某些第三方庫在windows7下面經常出現不兼容的問題。今天找到了一篇博文,按照方法安裝成功了。

需要安裝 xlml

(1)安裝 ? pywin32-220.win32-py3.5.exe ?提供pywin32API

(2)安裝? Twisted-17.1.0-cp35-cp35m-win32.whl,使用pip安裝總是報vc的dll文件缺失的錯誤,其實哪怕下個VS2015還是會報錯,到第三方庫網站上面下載Twisted-17.1.0-cp35-cp35m-win32.whl,然后使用 pip 本地安裝,注意,不能保存在中文文件夾里面,python不認。

pip install E:\Download\Twisted-17.1.0-cp35-cp35m-win32.whl

pip install wheel ? ? ? ? ? ? ? ? ? # 用來安裝whl格式文件的,可裝可不裝

(3)安裝 Scrapy-1.4.0-py2.py3-none-any.whl? , 只要Twisted能夠成功安裝,scrapy就基本上沒有問題了。還是到第三方庫網站上面下載對應版本的Scrapy-1.4.0-py2.py3-none-any.whl,本地安裝即可。

pip install E:\Download\Scrapy-1.4.0-py2.py3-none-any.whl

下面是第三方庫的網址鏈接,應有盡有,版本齊全,良心網站

Unofficial Windows Binaries for Python Extension Packages


scrapy startproject XXXXX ?#創建名字為XXXXX的空scrapy項目。

scrapy crawl XXspider #爬蟲或者自己命名的爬蟲開始啟動,注意要先變更到自己的項目文件夾中,否則不會啟動。例如:

cd? C:\Users\Administrator\PycharmProjects\Scrapy project\scrapytest

scrapy startproject MySpider

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。

推薦閱讀更多精彩內容