天天看點

雲主機Python3環境安裝PySp

利用雲伺服器我們可以玩好多的技術,前面的我給大家分享的大多與網站和一些服務有關,今天我給大家分享有關雲主機Python3環境安裝PySpider爬蟲架構過程

本文講解雲主機上PySpider爬蟲架構的安裝。

關于伺服器配置,可選1核2G記憶體,或者按需選擇。

更多參閱:伺服器規格文檔

雲主機Python3環境安裝PySp

安裝流程

pip

首先確定你已經安裝了pip,若沒有安裝,請參照此文

phantomjs

PhantomJS 是一個基于 WebKit 的伺服器端 JavaScript API。它全面支援web而不需浏覽器支援,其快速、原生支援各種Web标準:DOM 處理、CSS 選擇器、JSON、Canvas 和 SVG。 PhantomJS 可以用于頁面自動化、網絡監測、網頁截屏以及×××面測試等。

安裝方式

以上附有官方安裝方式,如果你是 Ubuntu,還可以使用如下指令:

sudo apt-get install phantomjs

pyspider

直接運作pip安裝即可

pip install pyspider

測試

安裝完成之後,如果沒有任何的報錯,那就OK

指令行輸入

pyspider all

然後浏覽器通路 http://localhost:5000

觀察一下效果,如果可以正常出現 PySpider 的頁面,那證明一切OK

在此附圖一張,這是寫了幾個爬蟲之後的界面。

雲主機Python3環境安裝PySp

繼續閱讀