1. 程式人生 > 其它 >windows10安裝python和mongodb搭建爬蟲環境

windows10安裝python和mongodb搭建爬蟲環境

最近準備學習python爬蟲,搭建環境用了好久,這裡記錄一下

安裝python

首先在官網下載python的安裝包,下載3.6版本即可

在安裝之前為了防止出錯,先要設定一下許可權 C:Windowstemp 這個的user使用者設定為完全控制

安裝完畢後進入cmd執行下 python –version 看是否成功,顯示版本則成功

安裝python庫

一般的庫可以直接用pip安裝,因為是python3版本,所以用pip3 install [庫名稱]

pip3 install beautifulsoup4
pip3 install requests
pip3 install pymongo

除了pip安裝,還可以使用whl方式,有些安裝不上或者有問題的可以用這種方法

首先到 pypi.python.org 搜尋需要的庫,然後下載下來使用命令安裝,這裡我需要用到lxml庫,找到對應平臺下載下來之後在當前目錄執行如下命令即可安裝成功

 pip3 install lxml-4.0.0-cp36-cp36m-win_amd64.whl

安裝mongodb

下載並安裝 https://www.mongodb.com/download-center#community

安裝完成後需要進行一些設定,在c盤目錄下建立2個資料夾

c:/data/db c:/data/log

然後再mongodb的bin( C:Program FilesMongoDBServer3.6bin)目錄下開啟命令列

按順序執行如下命令,每個單獨開命令視窗

mongod.exe --dbpath c:datadb
mongod.exe
mongo.exe

繼續在mongo目錄下建立一個mogod.cfg檔案,內容如下

systemLog:
 destination: file
 path: c:datalogmongod.log
storage:
 dbPath: c:datadb

然後執行命令,引號內替換成自己對應的路徑

mongod.exe --config "C:Program FilesMongoDBServer3.6binmongod.cfg" --install

這樣就安裝成功了,可以用軟體測試一下

mongodb官方文件:https://docs.mongodb.com/manual/tutorial/install-mongodb-on-windows/