編寫網絡爬蟲對于狀态碼的處理----HTTP常用狀态碼

狀态代碼	代碼描述	處理方式
200	請求成功	獲得響應的内容，進行處理
201	請求完成，結果是建立了新資源，新建立資源的URI可在響應的實體中得到	爬蟲中不會遇到
202	請求被接受，但處理尚未完成	阻塞等待
204	伺服器端已經實作了請求，但是沒有傳回新的資訊，如果客戶是使用者代理，則無需為此更新自身的文檔視圖	丢棄
300	該狀态碼不被HTTP/1.0的應用程式直接使用，隻是作為3XX類型回應的預設解釋，存在多個可用的被請求資源	若程式中能夠處理，則進行進一步處理，如果程式中不能處理，則丢棄
301	請求到的資源都會配置設定一個永久的URL，這樣就可以在将來通過該URL來通路此資源	重定向到配置設定的URL
302	請求到的資源在一個不同的URL處臨時儲存	重定向到配置設定的URL
304	請求的資源未更新	丢棄
400	非法請求	丢棄
401	未授權	丢棄
403	禁止	丢棄
404	沒有找到	丢棄
5XX	回應代碼以“5”開頭的狀态碼表示伺服器端發現自己出現錯誤，不能繼續執行請求	丢棄