1. 程式人生 > >mac os安裝pyquery

mac os安裝pyquery

mac已經有python 2.7了,裡面也已經有easy_install了

所以可以直接:sudo easy_install pyquery即可安裝html的解析pyquery

使用:

#!/usr/bin/env python
# encoding: utf-8

from pyquery import PyQuery as pyq
import sys
reload(sys)
sys.setdefaultencoding("utf-8")

class CrawlPython:
    def __init__(self, url):
        self.url = url

    def crawlW3C(self):
        doc = pyq(url=self.url)
        cts = doc('#leftcolumn a')
        pythonTXT = open("python.txt", "w")

        for data in cts:
            pythonTXT.write(pyq(data).text() + '\n') #寫入到檔案中
            print pyq(data).text()
            print '\n'

if __name__ == '__main__':
    crawl = CrawlPython('http://www.runoob.com/python/python-object.html')
    crawl.crawlW3C()




相關推薦

mac os安裝pyquery

mac已經有python 2.7了,裡面也已經有easy_install了 所以可以直接:sudo easy_install pyquery即可安裝html的解析pyquery 使用: #!/usr/bin/env python # encoding: utf-8 fro

Mac OS安裝Scrapy

競爭 卸載 刪除 tar home 分享 trace you exc 個人覺得掌握簡單的爬蟲知識非常有用,特別是想要從一些特定網站自動地下載一些資源或者統計一些數據,非常的有用。對於產品經理來說,如果要了解競爭產品、替代產品的價格,可以寫一個爬蟲腳本從各大電商網站爬取相關的

mac os 安裝mysql

wpa art soc pass mysq use date cal logs 1.利用brew安裝 brew install mysql 2.報錯處理 ERROR 2002 (HY000): Can‘t connect to local MySQL server t

mac os安裝scrapy框架

true ins 是否 bre 顯示 light cnblogs class 只需要 因為Mac 自帶了python 2.7 所以只需要安裝pip包管理工具安裝scrapy就可以了 sudo easy_install pip 然後 pip install Scrap

Mac OS安裝 OpenCV(python3)

body 建立 def python3 news llvm 再次 port ref 我的博客地址:戳這裏 運行命令: brew install opencv3 --with-python3 --c++11 --with-contrib brew link --force

mac os 安裝 geckodriver

$path driver mar 安裝 pos 作用 odr bash post 鏈接: http://remarkablemark.org/blog/2016/11/06/selenium-geckodriver/ 在網上搜了很多方法,都是又麻煩又不起作用。 最後還是在這

Mac os安裝MySQL數據庫,系統提示mysql: command not found該怎麽辦

mysql -s 參考 source 立即生效 登錄 found log 自己 當我們安裝好MySQL後,在終端輸入mysql命令,發現並不能看到自己安裝的數據庫,這是因為你沒有配置環境變量。 在os系統中安裝MySQL數據庫默認保存在/usr/local/mysql

Tensorflow 學習筆記(一)mac os 安裝 tensorflow

trap ras str ons bre col hello 指定 any Homebrew 安裝python brew install python 安裝pip curl ‘https://bootstrap.pypa.io/get-pip.py’ > get

Mac Os 安裝使用 itchat

2.7 沒有 The all 自帶 蘋果電腦 安裝使用 org 密碼 蘋果電腦自帶Python 2.7.10 這是老版本,已經不再維護。學習使用的話建議安裝最新的 Python 3.7.0 在Python.org 官方網站下載即可。 一、安裝pip Mac沒有自帶pip,需

Mac OS安裝gem rmagick

首先,必須安裝ImageMagick bower install ImageMagick 安裝gem rmagick的時候報錯 Building native extensions. This could take a while... ERROR: Error instal

mac os安裝多個版本的chrome

shell shel 下載 nts 選擇 mac clas macos mar 1.下載chrome69安裝程序後,雙擊dmg文件 2.將chrome拖到Application文件夾,如圖,選擇保留兩者,不要替換 打開應用程序,會多出一個Google Chrom

flume mac os安裝

使用brew安裝: brew install flume 修改配置檔案: vi /usr/local/Cellar/flume/1.6.0/libexec/conf/flume.conf 輸入以下內容: # 指定Agent的元件名稱 a1.sources = r1 a1.

Mac OS安裝mysql教程

前兩天為了開發方便,在自己電腦上裝了一個mysql,發現Mac上的安裝步驟中還是有些注意事項的,於是整理了這篇部落格。 1、下載 進入官網www.mysql.com下載所需的mysql版本和安裝包格式。  注:Mac需下載dmg格式檔案。 下載完畢後,點選p

Mac OS安裝lightgbm

安裝命令 brew install cmake brew reinstall [email protected] --without-multilib git clone --recursive https://github.com/Microsoft/Lig

4、【資料庫技術】Mac OS安裝MySQL

Mac OS安裝MySQL     在Mac環境下安裝MySQL有很多中選擇,可以去MySQL官網下載相應的安裝自己安裝,也可以使用Homebrew這樣的包管理工具進行安裝。推薦使用Homebrew進行安裝,具體的安裝步驟如下: 1、安裝Homebrew,Homebrew的安裝及簡單

Mac os安裝DVWA環境教程

Mac os安裝DVWA環境教程 1.儘管Mac自帶Apache和php 事實上Mac和WIN都用XAMPP一鍵化安裝比較方便 2.解壓DVWA-master 改名為dvwa移動到XAMPP的目錄 3.安裝好XAMPP之後進入Manage Serves 開啟MySQL和Apache 

Mac OS 安裝maven,並設定阿里雲映象倉庫

下載好了吧,那就找個你熟悉的地方放下他吧( ̄︶ ̄)↗下面設定環境變數 (╯-_-)╯~╩╩ 這個感覺很煩哎 :-( 開啟 終端(Terminal):    ⌘+空格:輸入“終端”或者“terminal”然後按回車在終端輸入:vim ~/.bash_profile 或者 vi

mac os安裝open cv2 for python

轉自:http://blog.csdn.net/flyfy1/article/details/8274288 看了幾篇安裝open cv2 for python,感覺都有點麻煩。上面這兩個算是比較簡單的。 我的作業系統是10.7,python 2.7.3。 首先就是要安

mac os 安裝 pkg-config

wget http://pkgconfig.freedesktop.org/releases/pkg-config-0.29.tar.gz . env LDFLAGS="-framework CoreFoundation -framework Carbon" ./confi

mac os 安裝 sql server

  1. 先安裝 docker  。 https://www.docker.com/ 2. 切換 docker 到國內映象  https://blog.csdn.net/wxqee/article/details/80409155 3. 安裝 sql