天天看點

python網絡爬蟲入門(二、網絡采集的常用工具)一、架構二、常用工具

一、架構

python網絡爬蟲入門(二、網絡采集的常用工具)一、架構二、常用工具

二、常用工具

1.用FireFox檢視目标網頁資訊

python網絡爬蟲入門(二、網絡采集的常用工具)一、架構二、常用工具

2.request擷取網頁資訊
python網絡爬蟲入門(二、網絡采集的常用工具)一、架構二、常用工具

3.用Beautiful和re進行資料清洗

python網絡爬蟲入門(二、網絡采集的常用工具)一、架構二、常用工具

4.使用Selenium和Phantmjs處理動态網頁

python網絡爬蟲入門(二、網絡采集的常用工具)一、架構二、常用工具
python網絡爬蟲入門(二、網絡采集的常用工具)一、架構二、常用工具