from lxml import etree
import requests
import os
root_url='http://www.51hao.cc/'
req=requests.get(root_url)
req.encoding='gb2312'
html=req.text
selector=etree.HTML(html)
infos=selector.xpath('//div[@class="fkce"]/div[@class="fkt"][position()>1]')
print(len(infos))
for info in infos:
province=info.xpath('div[@class="fkbj"]/p/a/text()')[0]
citys=info.xpath('div[@class="fklk"]/p/a/text()')
citys_url=info.xpath('div[@class="fklk"]/p/a/@href')
city_infos=zip(citys,citys_url)#映射函數(shù)
for city_info in city_infos:
city_name=city_info[0]
city_url=city_info[1]
print(province,city_name,city_url)
req2 = requests.get(city_url)
req2.encoding = 'gb2312'
html2 = req2.text
selector2 = etree.HTML(html2)
infos2 = selector2.xpath('//div[@class="all"]//div[@class="num_bg"]') # 運(yùn)營商
num = len(infos2)
for i in range(num):
first_3 = selector2.xpath('//div[@class="all"]/div[%s]//span[@class="nums"]/text()' % str(i + 2))[0]# 參數(shù)化xpath表達(dá)式
types = selector2.xpath('//div[@class="all"]/div[%s]/div[1]/text()' % str(i + 2))[0]
types1 = types.split('(')[0]
total = types.split('(')[1].split(')')[0].replace('共', '').replace('個', '')
mobiles = selector2.xpath('//div[@class="all"]//li[%s]/a/text()' % str(i + 1))
for mobile in mobiles:
print(province,city_name,first_3, types1, total, mobile)
抓取電話號碼的例子
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
平臺聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點(diǎn)，簡書系信息發(fā)布平臺，僅提供信息存儲服務(wù)。
平臺聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點(diǎn)，簡書系信息發(fā)布平臺，僅提供信息存儲服務(wù)。
- 文/潘曉璐 我一進(jìn)店門，熙熙樓的掌柜王于貴愁眉苦臉地迎上來，“玉大人，你說我怎么就攤上這事。” “怎么了？”我有些...
- 正文 為了忘掉前任，我火速辦了婚禮，結(jié)果婚禮上，老公的妹妹穿的比我還像新娘。我一直安慰自己，他們只是感情好，可當(dāng)我...
- 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著，像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上，一...
- 文/蒼蘭香墨 我猛地睜開眼，長吁一口氣：“原來是場噩夢啊……” “哼！你這毒婦竟也來了？” 一聲冷哼從身側(cè)響起，我...
- 序言：老撾萬榮一對情侶失蹤，失蹤者是張志新（化名）和其女友劉穎，沒想到半個月后，有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體，經(jīng)...
- 正文 獨(dú)居荒郊野嶺守林人離奇死亡，尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
- 正文 我和宋清朗相戀三年，在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
- 正文 年R本政府宣布，位于F島的核電站，受9級特大地震影響，放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜，卻給世界環(huán)境...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至，卻和暖如春，著一層夾襖步出監(jiān)牢的瞬間，已是汗流浹背。 一陣腳步聲響...
- 正文 我出身青樓，卻偏偏與公主長得像，于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子，可洞房花燭夜當(dāng)晚...
