from bs4 import BeautifulSoup
import requests
url = 'http://www.tripadvisor.cn/Attractions-g60763-Activities-New_York_City_New_York.html#ATTRACTION_SORT_WRAPPER'
we_data=requests.get(url)# 用requests.get方法獲得網頁，並把它儲存
soup =BeautifulSoup(we_data.text ,'lxml') #用BeautifulSoup 解析網頁，用.text方法使得網頁可讀
titles =soup.select('div.detail '
 
)# 爬取一類元素，（看其標籤中共有屬性）
imgs=soup.select('img[width="160"]')# 爬取想要圖片的連結
cates =soup.select('div.p13n_reasoning_v2')#爬取分類標籤，一定在對應的父標籤就停下，eg：<div class="p13n_reasoning_v2">
for title,img,cate in zip(titles,imgs,cates):
data ={
        'title':title.get_text(),
        'img':img.get('src'),
        'cate'
 
:list(cate.stripped_strings),
    }
    print(data)

使用的是Python3.4，菜鳥練習。

結果：

{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['公園', '景觀步行區', '景點與地標'], 'title': '中央公園 93,099 條點評 公園, 景觀步行區, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['歷史景點', '紀念碑與雕像', '專業博物館', '景點與地標'], 'title': '9/11紀念館 62,358 條點評 歷史景點, 紀念碑與雕像, 專業博物館, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['藝術博物館', '景點與地標'], 'title': '大都會藝術博物館 40,694 條點評 藝術博物館, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['觀察臺與觀景塔', '瞭望臺'], 'title': '峭石之巔觀景臺 57,680 條點評 觀察臺與觀景塔, 瞭望臺'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['景點與地標'], 'title': '9/11紀念館 62,358 條點評 歷史景點, 紀念碑與雕像, 專業博物館, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['建築物', '景點與地標'], 'title': '埃利斯島 4,744 條點評 歷史景點, 歷史博物館, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['景點與地標'], 'title': '總督島 571 條點評 歷史景點, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['公園', '景觀步行區'], 'title': '古柏惠特博物館 352 條點評 歷史景點, 藝術博物館'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['藝術博物館'], 'title': '溫室花園 258 條點評 花園'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['建築物', '觀察臺與觀景塔', '景點與地標'], 'title': '莎士比亞公園 70 條點評 花園'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['公園'], 'title': '玻璃花房 36 條點評 花園'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['建築物', '觀察臺與觀景塔'], 'title': 'The Jefferson Market Garden 18 條點評 花園'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['紀念碑與雕像', '景點與地標'], 'title': '9/11紀念館 62,358 條點評 歷史景點, 紀念碑與雕像, 專業博物館, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['教堂與大教堂'], 'title': '大都會藝術博物館 40,694 條點評 藝術博物館, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['專業博物館'], 'title': '弗裡克美術收藏館 7,172 條點評 藝術博物館'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['輪渡'], 'title': '世貿大廈遺址博物館工作室 3,180 條點評 專業博物館'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['劇院', '景點與地標'], 'title': '峭石之巔觀景臺 57,680 條點評 觀察臺與觀景塔, 瞭望臺'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['建築物', '景點與地標'], 'title': '斯塔滕島渡輪 14,547 條點評 輪渡'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['專業博物館'], 'title': '羅斯福島棕櫚泉 2,556 條點評 有軌電車'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['競技場與體育館'], 'title': '世貿一號觀景臺 14,346 條點評 建築物, 觀察臺與觀景塔'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['聖地與宗教景點', '藝術博物館'], 'title': '9/11紀念館 62,358 條點評 歷史景點, 紀念碑與雕像, 專業博物館, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['專業博物館'], 'title': '自由女神像 27,389 條點評 紀念碑與雕像, 景點與地標'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['區域', '景點與地標'], 'title': 'The Oculus 454 條點評 紀念碑與雕像'}
{'img': 'http://cc.ddcdn.com/img2/x.gif', 'cate': ['藝術博物館'], 'title': '愛麗絲夢遊仙境雕塑 398 條點評 紀念碑與雕像'}


Process finished with exit code 0