為什么要寫相親的爬蟲
- 學習完基礎語法,感覺空蕩蕩的,每個知識點沒能融合到一起,需要一個項目來鍛煉下
- 爬蟲項目能夠加強我們數據獲取的能力,數據是萬金油,所以爬蟲也是一項必備技能
- 之所以爬取相親的網站是因為其這部分不用登陸,減少爬蟲項目難度
目標網站人工操作流程
- 打開網頁 http://www.zhenai.com/zhenghun,
- 進入后得知這是一個城市列表頁(無分頁)
- 點擊某個城市后可以看到用戶列表(有分頁)
- 點擊用戶可以進入用戶詳情(無分頁)
爬蟲項目產品邏輯圖與引擎架構圖
未命名文件 (3).png