Python開發安裝的一些常用模組

阿新 • • 發佈：2019-01-21

Python包管理工具，可以很方便的安裝第三方模組

1：setuptools

Ubuntu 安裝：sudo apt-get install python-setuptools
windows安裝：下載工具包，命令列進入其目錄，執行
python setup.py build
python setup.py install
下載地址：https://pypi.python.org/pypi/setuptools/
詳細使用教程：http://www.360doc.com/content/14/0306/11/13084517_358166737.shtml

2：pip（建議使用pip管理自己的包）

Ubuntu 安裝：sudo apt-get install python-pip
windows安裝：下載工具包，命令列進入其目錄，執行
python setup.py build
python setup.py install
下載地址：https://pypi.python.org/pypi/pip/
詳細使用教程：http://www.aikaiyuan.com/6918.html

python爬蟲模組的相關包和框架

1:BeautifulSoup

關於BeautifulSoup模組主要用於規範化網頁原始碼，利用其一些特定的解析標籤函式來分析網頁，的得到一些特定的內容，用起來方便簡單容易入門，但仍然有一些弊端，比如說對於網頁中含有js程式碼的就不能有效讀取與分析，所以常結合正則表示式來進行使用，效率特別好

詳細教程：http://beautifulsoup.readthedocs.org/zh_CN/latest/
安裝參考：http://blog.csdn.net/gamer_gyt/article/details/45113605

2:urllib 和 urllib2

兩者功能都十分強大，接受URL請求進行相應的解析
urllib詳解：http://python.jobbole.com/81478/
urllib2詳解：http://cuiqingcai.com/947.html
兩者的區別：http://www.cnblogs.com/yuxc/archive/2011/08/01/2124073.html

3：Request模組

提供與web進行互動，比如提交表單資訊等
參考教程：http://blog.csdn.net/iloveyin/article/details/21444613 http://blog.163.com/power_mr/blog/static/138744007201392492354260/

4:Scrapy

Scrapy是一個為了爬取網站資料，提取結構性資料而編寫的應用框架。可以應用在包括資料探勘，資訊處理或儲存歷史資料等一系列的程式中。
下載地址：http://scrapy.org/
中文文件：http://scrapy-chs.readthedocs.org/zh_CN/latest/

5：其他的python爬蟲框架包括：

1. Crawley: Scraping Framework based on Non Blocking I/O operations.https://github.com/jmg/crawley

2. portia: Visual scraping for Scrapyhttps://github.com/scrapinghub/portia

3. newspaper: Article scraping & curationhttps://github.com/codelucas/newspaper
4. python-goose: 提取出文章的主體https://github.com/xgdlm/python-goosehttps://github.com/grangier/python-goose
Python-goose專案是用Python重寫的Goose，Goose原來是用Java寫的文章提取工具。Python-goose的目標是給定任意資訊文章或者任意文章類的網頁，不僅提取出文章的主體，同時提取出所有元資訊以及圖片等資訊，支援中文網頁。
Python-goose可提取的資訊包括：
文章主體內容
文章主要圖片
文章中嵌入的任何Youtube/Vimeo視訊
元描述
元標籤

python操作資料庫模組

1：MySQLdb模組

此模組用於連線MySQL資料庫，沒有他是萬萬不能連線的，有了他也不一定好使，常見錯誤便是好多人在匯入這個包的時候，不注意大小寫，以至於提示無此模組
詳細文件：http://www.yiibai.com/python/python_mysql.html
下載地址：https://pypi.python.org/pypi/MySQL-python/1.2.5

2：sqlite3模組

python2.5以後內建了sqlite3模組，是一個輕量級的資料庫
詳細文件：http://www.cnblogs.com/yuxc/archive/2011/08/18/2143606.html

python 的 Web框架

這方面的模組較多，但小編使用的django框架
==============================================以下為轉載

1.Zope2

Zope 2是一款基於Python的Web應用框架，是所有Python Web應用程式、工具的鼻祖，是Python家族一個強有力的分支。Zope 2的“物件釋出”系統非常適合面向物件開發方法，並且可以減輕開發者的學習曲線，還可以幫助你發現應用程式裡一些不好的功能。
下載地址：http://zope2.zope.org/releases

2.Web2py

Web2py是一個用Python語言編寫的免費的開源Web框架，旨在敏捷快速的開發Web應用，具有快速、可擴充套件、安全以及可移植的資料庫驅動的應用，遵循LGPLv3開源協議。
Web2py提供一站式的解決方案，整個開發過程都可以在瀏覽器上進行，提供了Web版的線上開發，HTML模版編寫，靜態檔案的上傳，資料庫的編寫的功能。其它的還有日誌功能，以及一個自動化的admin介面。
下載地址：http://web2py.com/examples/default/download
相關閱讀：[開源推薦]企業級Web框架Web2py

3.Web.py

Web.py是一個輕量級的開源Python Web框架，小巧靈活、簡單並且非常強大，在使用時沒有任何限制。目前Web.py被廣泛運用在許多大型網站，如西班牙的社交網站Frinki、主頁日平均訪問量達7000萬次的Yandex等。
安裝地址：http://webpy.org/install
相關閱讀：[開源推薦]小巧靈活的Web框架Web.py

4.Pyramid

Pyramid也是一款輕量級的開源Python Web框架，是Pylons專案的一部分。Pyramid只能執行在Python 2.x或2.4以後的版本上。在使用後端資料庫時無需宣告，在開發時也不會強制使用一些特定的模板系統。
下載地址：http://www.pylonsproject.org/projects/pyramid/download

5.Django

Django是一個開源的Web框架，並且採用MVC設計模式。它是使用非常廣泛的Python Web框架，包含許多非常實用的庫來加速Web開發。
下載地址：https://www.djangoproject.com/download/

6.CubicWeb

CubicWeb宣揚自己不僅是一個Web開發框架，而且還是一款語義Web開發框架。CubicWeb使用關係查詢語言（RQL Relation Query Language）與資料庫之間進行通訊。
下載地址：http://docs.cubicweb.org/admin/setup

下面這些資訊圖是該六大框架的評測圖和資訊圖。
六大框架評測結果如下：

六大框架功能對比如下：

Python機器學習與資料分析方面庫

1：numpy，科學計算很方面的一個庫

詳細文件：http://blog.chinaunix.net/uid-21633169-id-4408596.html
官方網址：http://www.numpy.org/

2：pandas 是基於 Numpy 構建的含有更高階資料結構和工具的資料分析包

官方網站：http://pandas.pydata.org/
詳細文件：http://www.open-open.com/lib/view/open1402477162868.html

3：Scikit-learn 機器學習庫，包括分類演算法，聚類演算法，迴歸等

官方網址：http://scikit-learn.org/stable/
詳細文件：http://blog.csdn.net/gamer_gyt/article/details/48833361 http://my.oschina.net/u/175377/blog/84420

4：python中的其他機器學習包

參考：http://www.cnblogs.com/wentingtu/p/3513979.html

5：python視覺化畫圖包

官方網址：http://matplotlib.org/
詳細文件：http://old.sebug.net/paper/books/scipydoc/matplotlib_intro.html

6：scipy包包含致力於科學計算中常見問題的各個工具箱。它的不同子模組相應於不同的應用。像插值，積分，優化，影象處理，，特殊函式等等。

詳細文件：http://blog.chinaunix.net/uid-21633169-id-4437868.html
官方文件：http://www.scipy.org/

7：jieba分詞包，在做文字挖掘的時候會用到

管方網址：https://pypi.python.org/pypi/jieba/
詳細文件：http://blog.csdn.net/gamer_gyt/article/details/48089403

8：smallseg有一個開源的中文分詞包

詳細文件：http://www.oschina.net/p/smallseg
安裝方法：只需將下載的包中smallseg.py拷貝到Python安裝目錄的Lib資料夾中即可

9：python-graph模組：實現了很多圖演算法

官方文件：https://pypi.python.org/pypi/python-graph

python GUI程式設計包和框架：

1：wxPython模組，用於編寫GUI程式，此模組常結合boa-constructor使用，具體使用方法自行百度

官方文件：http://www.wxpython.org/
附;另外用於編寫GUI程式的模組還有PyQt4,eric模組，還有一個PythonIDE winPython安裝之後來進行Python程式碼的編寫，裡邊整合的有Qt Designer來編寫GUI，這個相對較為方便，類似於VC直接拉控制元件了

2：Tkinter模組

入門例項：http://www.cnblogs.com/kaituorensheng/p/3287652.html
官方文件：https://docs.python.org/2/library/tkinter.html

Python程式設計的遊戲庫

1：PyGame模組

PyGame是一個Python的庫，能夠讓你更容易的寫出一個遊戲。它提供的功能包括圖片處理和聲音重放的功能，並且它們能很容易的整合進你的遊戲裡
參考例項文件：http://eyehere.net/2011/python-pygame-novice-professional-1/
官方網址：http://www.pygame.org/download.shtml

python網路程式設計

1：Twisted模組

用Python實現的基於事件驅動的網路引擎框架
詳細文件：http://blog.sina.com.cn/s/blog_704b6af70100py9n.html http://blog.csdn.net/hanhuili/article/details/9389433
管方文件：http://twistedmatrix.com/trac/

註明：Python的模組很多，當你需要用到哪個的時候再去安裝，但無論是安裝哪一個模組，都要注意的是版本問題，因為不同版本之間不能完全相容，以至於在安裝模組的時候出現各種奇葩錯誤，但小夥伴們要耐得住性子，慢慢來，更多模組會在後繼繼續分享。博主這裡有Python2.7的安裝包和各種模組外掛，有需要的留言傳送。

python影象處理

1：PIL

Ubuntu安裝： sudo apt-get install python-imaging

詳細文件： http://wenku.baidu.com/link?url=r9vOfxsGkUHzoGw3rxvw0MfDRDh7y_qop2Qfk1AtM0NrswPIy3YdJHyRS6d4Ds83-cYgYPf567Pun7sHiHNmpttwgnB7sPKBwahIazeUhPW

官方文件： http://effbot.org/imagingbook/

python檔案操作包

1：os

https://docs.python.org/3.4/library/os.html

2：shutil

https://docs.python.org/3.4/library/shutil.html

以上這兩個包都是python內建的package，不需要另外安裝