1. 程式人生 > >驢媽媽遊記爬蟲思路

驢媽媽遊記爬蟲思路

1.第一步找網址

這一次發現是分頁模式,分頁模式就需要分頁的爬取方法,需要百度學習下分頁的爬取技術

2.處理分頁

3.Xpath處理需要爬取的內容

我主要選擇了標題,遊記屬性,章節目錄和內容 四塊內容

標題

夢幻川西之旅(畢棚溝—鷓鴣山—成都)

遊記屬性 

小櫻子angel||2018-12-09釋出||12月出遊||119張照片

章節目錄 

>>美圖預告>>畢棚溝,隱藏在山溝裡的一片冰雪世界>>鷓鴣山,一個夢幻童心的冰雪世界
>>寬窄巷子,來成都必去的景點打卡地>>太古裡,網紅街拍好去處
>>冬日的成都街頭,秋意依然濃厚>>川西不能錯過的美食>>關於住宿>>旅行後的碎碎念

內容 

作為在南方長大的孩子,總覺得從小沒有看過雪是成長中的一種遺憾。而長大後,
就覺得有雪的世界才是冬天該有的樣子。每到冬季,總會想要到那下雪的聖地走一走,
幻想著眼前白雪飄飄的一片世界,那該有多美!所以,
這幾年也陸陸續續的藉著旅行的機會目睹過那些冰雪世界,總算是把小時候的遺憾補回來了。

但人總是“貪心”的嘛,對於總痴迷於冰雪世界的我來說今年也不想在無
雪的南方平淡的度過這個冬季,所以,在即將踏入12月的南方還熱得穿
著短袖的孩子,決定要去過一個有雪的冬天,於是,收拾起冬裝,去那
有著大自然美的四川,開啟了一場夢幻的冰雪約會!

單一頁進行程式碼測試 

 4.匯入資料庫中儲存

作者微訊號w912917507