由於python版本比較多，python2與python3相容又不好，導致很多擴充套件庫版本也很多，安裝擴充套件庫就容易碰到問題，有些直接yum就可以安裝，有些需要用pip安裝，有些需要直接下載安裝，我這裡就列舉幾個我碰到的吧。
可以用virtualenv這個虛擬環境
也可以用conda這個工具，我這裡就是手動安裝沒有藉助這種擴充套件庫管理工具。
先把本地python專案上傳到伺服器，可以用rz工具，也可以用svn，我是先執行，再根據報錯資訊新增擴充套件庫，這裡安裝python34。

2.先安裝pip3： yum search pip
可以看到：

安裝pip3： yum install python34-pip -y
然後看版本資訊：pip3 –version 能看到版本資訊則安裝成功。

3.執行spider.py：python3 spider.py
首先看一下爬蟲引用了那些擴充套件：

看到報錯（如果報錯跟re相關，則直接安裝正則擴充套件即可：pip3 install regex）：

可以看到缺少mysql.connector擴充套件
安裝：yum search mysql-connector

可以看到版本不正確，只支援py2，不必安裝了
pip安裝：pip3 search mysql-connector

找到了，安裝：pip3 install mysql-connector
但是:

報錯了！
換種方式安裝，下載下來自己手動安裝：
wget

https://dev.mysql.com/get/Downloads/Connector-Python/mysql-connector-python-2.1.5.tar.gz –no-check-certificate
如果沒有安裝wget工具先安裝wget:yum install wget -y
下載下來後解壓安裝：
python3 setup.py install
安裝成功，然後在執行爬蟲:python3 spider.py

庫檔案問題已經變了
當然用pymysql更簡單一些，用pip3可以直接安裝成功

4.可以看到現在是缺少requests擴充套件，安裝：
pip3 install requests
安裝pyquery
pip3 install pyquery
安裝Beautifulsoup：
pip3 install Beautifulsoup

報錯了，尋找解決辦法，進Beautifulsoup官網：

可以看到安裝版本不正確：
pip3 install Beautifulsoup4
安裝成功。
python3 spider.py 執行正常，能夠爬取列印資料

5.新增定時任務：
crontab -e
輸入：
/20 * * * python3 /project/python/spider.py
這個任務代表每20分鐘以python3 執行/project/python/spider.py檔案一次，規則如下：

儲存退出，如果沒有錯誤提示說明格式正確。
新增任務成功。
檢視定時任務結果：
cat /var/log/cron
我這裡爬到的列印結果，此時資料庫也應該有資料了。