安裝好了anaconda和Pycharm之后,直接在命令行里pip install scrapy之后就可以安裝scrapy了。
在安裝的過程中可能會報錯不存在twisted,這個可以在百度直接搜素文件下載之后,在命令行輸入“pip install +twisted的文件路徑”進行安裝,然后再安裝scrapy就可以了。
安裝好了scrapy之后,要怎么創建一個scrapy文件呢?要怎么在指定的文件夾里創建scrapy文件呢?直接看圖:
在指定文件夾下創建scrapy文件的方法
1、使用“G:”進入到想要創建的磁盤中;
2、使用“cd Pycharm”進入到指定的文件夾中;
3、使用“scrapy startproject 項目名稱” 創建一個新的項目(是以文件夾顯示的);
4、使用“cd 項目名稱” 進入新創建的項目文件夾里;
5、使用 “scrapy genspider spider(此為spider文件名,可以自定義) 目標網址” 就可以直接創建一個spider(直接創建抓取的的網址)。
scrapy startproject Tableau創建的項目文件
scrapy startproject Tableau創建的項目文件??
進入spiders文件
創建的spider文件
在Pycharm里打開Tableau文件
通過以上的操作就可以在指定的文件夾下創建一個新的scrapy文件,并且把我們要抓取的目標網址也都創建好了。