單任務爬蟲

為什么要寫相親的爬蟲

  • 學習完基礎語法，感覺空蕩蕩的，每個知識點沒能融合到一起，需要一個項目來鍛煉下
  • 爬蟲項目能夠加強我們數據獲取的能力，數據是萬金油，所以爬蟲也是一項必備技能
  • 之所以爬取相親的網站是因為其這部分不用登陸，減少爬蟲項目難度

目標網站人工操作流程

  • 打開網頁 http://www.zhenai.com/zhenghun，
  • 進入后得知這是一個城市列表頁（無分頁）
  • 點擊某個城市后可以看到用戶列表（有分頁）
  • 點擊用戶可以進入用戶詳情（無分頁）

爬蟲項目產品邏輯圖與引擎架構圖

未命名文件 (3).png
最后編輯于 ：
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明：文章內容（如有圖片或視頻亦包括在內）由作者上傳并發布，文章內容僅代表作者本人觀點，簡書系信息發布平臺，僅提供信息存儲服務。

推薦閱讀更多精彩內容