Scrapy框架在mac osx下的安裝

一直對python的網絡部分挺感興趣的,抽空了解一下scrapy這個爬蟲框架,爲接下來的項目作準備
——————————————
大致有以下幾步:
1,python的安裝(mac一般默認安裝,我的Yosemite 裏的是2.7.6)
2,pip的安裝(編譯源碼)
3,scrapy的安裝(編譯源碼)
4,解決一個錯誤()

scrapy的缺點就是依賴的包太多,再加上偉大的防火牆,安裝的時候各種吐血,不過坐昨天折騰了兩個小時還是搞定了,祕訣就是編!譯!源!碼!(不想吐槽了==||)
第一步:安裝python,掠過

第二步:安裝pip,不推薦任何在線安裝的方式,編譯源碼還是最讓人放心的,地址:

第三步:安裝scrapy,官方推薦的方式是用pip安裝,然後各種錯誤被我放棄了,後面還是直接上官網搞源碼(現在你才告訴裝pip沒用?摔~~,別急,等下還要裝lxml)
進入目錄後先編譯後安裝,
python setup.py build
python setup.py install
可能會遇到沒有權限的情況,可以在兩個命令前加sudo
安裝過程中可能出現的錯誤:
http://blog.marchtea.com/archives/91
我一開始也是找的這篇文章,直接拷貝發現不行==|
把裏面的10.8改成當前系統的版本(10.10)就好了

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章