天天看點

Python3~mac安裝scrapy并建立myspider項目

mac安裝scrapy并建立項目,引入PyCharm

1\sudo pip install Scrapy  

2\scrapy startproject mySpider

3\打開Pycharm--àopenproject---》選擇指令行中建立的mySpider

4、在mySpider檔案夾下運作程式scrapy crawlbaidu(爬蟲名稱)

百度設定的反爬規則協定,scrapy遵守這些協定,但是可以改動,settings.py中改動

執行:scrapy crawl baidu後

繼續閱讀