簡(jiǎn)易爬蟲抓取糗事百科熱門

我剛學(xué)python不久,參考 靜覓博客http://cuiqingcai.com/1052.html寫的這個(gè)爬蟲

我沒用正則表達(dá)式,用了beautifulsoup

代碼比較簡(jiǎn)易

import urllib2
from bs4 import BeautifulSoup

 url = 'http://www.qiushibaike.com/hot/'

user_agent = 'Mozilla/5.0 (Windows NT 6.1)'

headers = {'User-agent' : user_agent}

request = urllib2.Request(url,headers= headers)

response = urllib2.urlopen(request)

cat_img = response.read().decode('utf-8')

bs0bj = BeautifulSoup(cat_img,"html.parser")

namelist = bs0bj.findAll('div', "content")

for name in namelist:

print(name.string)
QQ截圖20160727202440.png
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

推薦閱讀更多精彩內(nèi)容

  • 我上一篇blog說過,iOS開發(fā)如果之前沒接觸過除了c和c++(c++太難了,不花個(gè)十來年基本不可能精通)的語言,...
    danielss閱讀 773評(píng)論 1 1
  • 爬蟲文章 in 簡(jiǎn)書程序員專題: like:128 - Python 爬取落網(wǎng)音樂 like:127 - 【圖文詳...
    treelake閱讀 29,591評(píng)論 33 638
  • 每個(gè)故事都會(huì)未完待續(xù),,每個(gè)場(chǎng)景都會(huì)潸然落墨.無論是主角還是陪襯,,在自己的世界里你永遠(yuǎn)光彩灼灼.簡(jiǎn)單的陪伴,,投...
    如風(fēng)一般的女子閱讀 300評(píng)論 0 0
  • 我愿意隨手留下這片刻的美好。 保持對(duì)生活的愛和熱忱, 把每一天活得熱氣騰騰。 fighting!
    素媚閱讀 318評(píng)論 4 6