1. 程式人生 > >爬蟲的瀏覽器偽裝技術程式碼例項

爬蟲的瀏覽器偽裝技術程式碼例項

"""瀏覽器偽裝"""
url="https://blog.csdn.net/weixin_41605937"
urllib.request.urlopen(url)
#這個是報頭
headers=("User-Agent","Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36 SE 2.X MetaSr 1.0")
opener=urllib.request.build_opener()#用來新增報頭資訊
opener.add_handlers=[headers]#新增報頭
data=opener.open(url).read()
file=open("D:/PythonFile/資料探勘/網頁作業2.html","wb")
file.write(data)
file.close()