天天看點

scrapy知網爬蟲項目-2(項目建立)

建立一個目錄檔案

開啟指令行進入該檔案夾下

輸入指令:

scrapy startproject mySpider

建立的項目目錄如下:

zhiwang/
    scrapy.cfg
    zhiwang/
        __init__.py
        items.py
        pipelines.py
        settings.py
        spiders/
            __init__.py
            ...
           

zhiwang: 項目名稱

crapy.cfg: 項目的配置檔案

zhiwang/: 項目的Python子產品,将會從這裡引用代碼

zhiwang/items.py: 項目的目标檔案

zhiwang/pipelines.py: 項目的管道檔案

zhiwang/settings.py: 項目的設定檔案

zhiwang/spiders/: 存儲爬蟲代碼目錄