什么是Spider
Spider翻譯成中文是蜘蛛的意思,如果我們把互聯網比喻成一個蜘蛛網的話,spider就是在互聯網上的蜘蛛,從網站上的某一頁開始,讀取網頁上的內容,找到在網頁上其它鏈接的地址,尋找下一個網頁...。有了spider,我們就可以隨意抓取互聯網上任何我們感興趣的東西了。
首先要理解什么是URL
就當大家都理解了
Spider翻譯成中文是蜘蛛的意思,如果我們把互聯網比喻成一個蜘蛛網的話,spider就是在互聯網上的蜘蛛,從網站上的某一頁開始,讀取網頁上的內容,找到在網頁上其它鏈接的地址,尋找下一個網頁...。有了spider,我們就可以隨意抓取互聯網上任何我們感興趣的東西了。
就當大家都理解了