由于課程上提供的網(wǎng)站訪問(wèn)不了，就隨便找了一個(gè)網(wǎng)站來(lái)爬
地址是http://guo.lu
（好像是個(gè)很文藝的網(wǎng)站啊XD）
代碼如下：
import requests
from bs4 import BeautifulSoup
import urllib.request
def get_url():
oriurl="http://guo.lu/page/"
urls=[]
for i in range(1,7):
url=oriurl+str(i)
urls.append(url)
return urls
def get_info(urls):
for url in urls:
wb_data = requests.get(url)
soup = BeautifulSoup(wb_data.text,'lxml')
for i in range(0,len(soup.select('#primary > div > div.else'))):
data = {
'title':soup.select('#primary > div > div > h3 > a')[i].get_text(),
'img':soup.select('#primary > div > a > img')[i].get('src'),
'description':soup.select('#primary > div > div.else > p')[i].get_text(),
'date' :soup.select('#primary > div > div > p')[i].get_text(),
'view_num' :soup.select('#primary > div > div > p.here > span.icon-view')[i].get_text(),
}
print(data)
get_info(get_url())
輸出內(nèi)容：
{'date': '五月 7, 2016', 'title': '用力地生活，只是因?yàn)閾碛邢胍刈o(hù)的人', 'description': '五月 7, 2016', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/05/wallhaven-229296.jpg', 'view_num': '5172'}
{'date': '一\n\n2013年，公司接了一個(gè)500強(qiáng)品牌的全國(guó)路演，那段時(shí)間項(xiàng)目很密集，人手不夠用，我被臨時(shí)調(diào)去項(xiàng)目組支...', 'title': '愿每個(gè)失戀的姑娘，都被時(shí)光溫柔以待', 'description': '一\n\n2013年，公司接了一個(gè)500強(qiáng)品牌的全國(guó)路演，那段時(shí)間項(xiàng)目很密集，人手不夠用，我被臨時(shí)調(diào)去項(xiàng)目組支...', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/04/wallhaven-269911.jpg', 'view_num': '6724'}
{'date': '\n3588\n5172\n92 ', 'title': '可是，我依然沒(méi)有遇見(jiàn)你', 'description': '\n3588\n5172\n92 ', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/04/wallhaven-105618-1.jpg', 'view_num': '9323'}
{'date': '四月 24, 2016', 'title': '第一眼心動(dòng)的人，要怎么做朋友', 'description': '四月 24, 2016', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/03/wallhaven-215913.jpg', 'view_num': '11690'}
{'date': '昨天飯后無(wú)聊瀏覽QQ好友個(gè)人信息，無(wú)意中看到閨蜜z的前男友昵稱還是倆人好的時(shí)候的情侶名，信息主頁(yè)上還...', 'title': '哪有什么歲月靜好，不過(guò)是有人替你負(fù)重前行', 'description': '昨天飯后無(wú)聊瀏覽QQ好友個(gè)人信息，無(wú)意中看到閨蜜z的前男友昵稱還是倆人好的時(shí)候的情侶名，信息主頁(yè)上還...', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/03/wallhaven-284841.jpg', 'view_num': '9722'}
{'date': '\n1415\n6724\n61 ', 'title': '那段奮不顧身的日子，叫青春', 'description': '\n1415\n6724\n61 ', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/03/wallhaven-194679.jpg', 'view_num': '8850'}
{'date': '四月 9, 2016', 'title': '我想要名正言順的關(guān)心', 'description': '四月 9, 2016', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/02/13d2ed25a5591b695aa23245d5018b391ad44b6f998e5-R5QYdw.jpg', 'view_num': '11096'}
{'date': '我們?yōu)閻?ài)情付出了那么多，可它也從沒(méi)有回報(bào)我們以安詳。\n\n好像每個(gè)二十幾歲的年輕女孩子都要有一個(gè)說(shuō)出...', 'title': '讓夢(mèng)想照進(jìn)現(xiàn)實(shí)', 'description': '我們?yōu)閻?ài)情付出了那么多，可它也從沒(méi)有回報(bào)我們以安詳。\n\n好像每個(gè)二十幾歲的年輕女孩子都要有一個(gè)說(shuō)出...', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/02/8bd6b9931ad5597e5ed5f1c0adaa6ace847c0253da4da-Aa4JWq.jpg', 'view_num': '10024'}
{'date': '\n3689\n9323\n92 ', 'title': '一想到你的不完美，便覺(jué)得更加愛(ài)你了', 'description': '\n3689\n9323\n92 ', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/01/wallhaven-109498.png', 'view_num': '9495'}
{'date': '三月 20, 2016', 'title': '我們拼命變好，是因?yàn)樾睦镒≈幌牍钾?fù)的人', 'description': '三月 20, 2016', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/01/wallhaven-304681.jpg', 'view_num': '10601'}
{'date': '1\n\n車窗外是一片無(wú)垠的大海。\n\n雨下了又停，彩虹在不遠(yuǎn)的前方，返回市區(qū)的路很長(zhǎng)，我坐在副駕駛上，向左...', 'title': '你多走了彎路，才看到更多的風(fēng)景', 'description': '1\n\n車窗外是一片無(wú)垠的大海。\n\n雨下了又停，彩虹在不遠(yuǎn)的前方，返回市區(qū)的路很長(zhǎng)，我坐在副駕駛上，向左...', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/01/wallhaven-282224.jpg', 'view_num': '8839'}
{'date': '\n7682\n11690\n154 ', 'title': '這真是個(gè)孤獨(dú)的世界', 'description': '\n7682\n11690\n154 ', 'img': 'http://guo.lu/wp-content/themes/Diaspora/timthumb/timthumb.php?src=http://guo.lu/wp-content/uploads/2016/01/wallhaven-33805.jpg', 'view_num': '9555'}
date跟description會(huì)混淆，因?yàn)檫@兩個(gè)的selector路徑一模一樣。。。。
其他沒(méi)什么難度，在瀏覽器的network里找到了真實(shí)的網(wǎng)頁(yè)地址之后就隨便爬了
