1.首先：明確目標(biāo)
進(jìn)入http://bj.xiaozhu.com/，然后進(jìn)入詳情頁中爬取標(biāo)題、地址、日租金、第一張房源圖片鏈接、房東圖片鏈接、房東性別等6個(gè)信息，最終是要爬取300個(gè)房源的這6個(gè)信息
列表頁
?
詳情頁
2.確認(rèn)抓取邏輯
? 2.1首先，我們得知道列表頁從第1頁到第N頁的鏈接規(guī)律，然后遍歷它
? 2.2其次，我們要知道列表頁中詳情頁的鏈接地址，這樣我們才能從列表頁中進(jìn)入詳情頁爬取信息
? 2.3然后，我們得爬取詳細(xì)頁中的6個(gè)信息，因?yàn)樾詣e信息不是我們常見的‘female’和‘male'，所以要對(duì)其進(jìn)行轉(zhuǎn)化
理清楚了邏輯之后，我們開始寫代碼
3.我所寫的代碼
1
2
運(yùn)行的部分結(jié)果為：
運(yùn)行的部分結(jié)果
至此，要爬取的信息就到手了！
