貓眼視訊Top100

import requests
import re,json
from multiprocessing import Pool

def get_one_page(url,head):
    #異常處理
    try:
        #傳送請求
        response=requests.get(url,headers=head)
        #判斷網頁狀態碼是否成功獲取網頁
        if response.status_code==200:
            return response.text
        return None
    except
 
 Exception:
        #其他返回None
        return None
def parse_one_page(html):
    #利用正則表示式進行資訊過濾
    pattern = re.compile('<dd>.*?board-index board-index.*?>(.*?)</i>.*?<a.*?title="(.*?)".*?<img.*?'
                         'lt.*?src="(.*?)".*?star">(.*?)</p>.*?releasetime">(.*?)'
 

                         '</p>.*?integer">(.*?)</i>.*?fraction">(.*?)</i>',re.S)
    #獲取篩選後的資訊並返回
    items=re.findall(pattern,html)
    return items
def write_to_file(items):
    #寫入資訊
    with open("貓眼電影Top100.txt", 'a+') as f:
        for item in items:
            #格式整理
            item= "排名"
 
+":"+item[0]+'\n'+\
                  "電影名稱"+':'+item[1]+'\n'+\
                  "電影封面"+':'+item[2]+'\n'+\
                  item[3].strip()+'\n'+\
                  "上映時間"+':'+item[4]+'\n'+\
                  "評分"+':'+item[5]+item[6]+'\n\n'
            #寫入
            f.write(str(item)+'\n')
    #關閉
    f.close()

def main(i):
    #設定UA，模擬瀏覽器
    head = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'}

    #生成url
    url = 'http://maoyan.com/board/4?offset=%d'%(i*10)
    #獲取返回的網頁
    html=get_one_page(url,head)
    #解析網頁，進行資訊篩選
    items=parse_one_page(html)
    #資訊寫入
    write_to_file(items)


if __name__ == '__main__':
    print("開始抓取貓眼TOP100電影榜單................")
    #例項化程序池
    pool=Pool()
    #程序開始
    pool.map(main,[i for i in range(10)])
    print("抓取完成，已寫入檔案............")

效果如下