爬蟲:如何在指定的文件夾下創建scrapy項目

安裝好了anaconda和Pycharm之后,直接在命令行里pip install scrapy之后就可以安裝scrapy了。

在安裝的過程中可能會報錯不存在twisted,這個可以在百度直接搜素文件下載之后,在命令行輸入“pip install +twisted的文件路徑”進行安裝,然后再安裝scrapy就可以了。

安裝好了scrapy之后,要怎么創建一個scrapy文件呢?要怎么在指定的文件夾里創建scrapy文件呢?直接看圖:

在指定文件夾下創建scrapy文件的方法

1、使用“G:”進入到想要創建的磁盤中;

2、使用“cd Pycharm”進入到指定的文件夾中;

3、使用“scrapy startproject 項目名稱” 創建一個新的項目(是以文件夾顯示的);

4、使用“cd 項目名稱” 進入新創建的項目文件夾里;

5、使用 “scrapy genspider spider(此為spider文件名,可以自定義) 目標網址” 就可以直接創建一個spider(直接創建抓取的的網址)。

scrapy startproject Tableau創建的項目文件
scrapy startproject Tableau創建的項目文件??
進入spiders文件
創建的spider文件
在Pycharm里打開Tableau文件

通過以上的操作就可以在指定的文件夾下創建一個新的scrapy文件,并且把我們要抓取的目標網址也都創建好了。

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。

推薦閱讀更多精彩內容