單任務爬蟲

為什么要寫相親的爬蟲

  • 學習完基礎語法,感覺空蕩蕩的,每個知識點沒能融合到一起,需要一個項目來鍛煉下
  • 爬蟲項目能夠加強我們數據獲取的能力,數據是萬金油,所以爬蟲也是一項必備技能
  • 之所以爬取相親的網站是因為其這部分不用登陸,減少爬蟲項目難度

目標網站人工操作流程

  • 打開網頁 http://www.zhenai.com/zhenghun,
  • 進入后得知這是一個城市列表頁(無分頁)
  • 點擊某個城市后可以看到用戶列表(有分頁)
  • 點擊用戶可以進入用戶詳情(無分頁)

爬蟲項目產品邏輯圖與引擎架構圖

未命名文件 (3).png
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。

推薦閱讀更多精彩內容