這兩天我下載下傳了小松部落格的當天日志,一條一條的看去發現不需要的蜘蛛并且禁止掉,但是發現了一大段的百度雲測的掃描日志
120.52.18.46 – – [03/May/2016:04:17:53 +0800] “POST /wp-content/themes/xiaosong/ajax/comment.php HTTP/1.0” 405 24 “-” “Baidu-YunGuanCe-ScanBot(ce.baidu.com)” 180.97.106.162
從一點多開始掃描我的網站到五點左右,這個讓我難以接受。于是決定禁止這個百度雲測,然後在檢視日志
發現用原來10000條放問日志驟降到2000條的通路日志
今天又下載下傳了一下日志,還是發現不少抓取我網站的蜘蛛,發現一個可疑的Yisouspider蜘蛛,百度了一下原來是神馬搜尋的蜘蛛,是國内的蜘蛛,給他放行,但是還是有
比如
140.205.145.53 – – [08/May/2016:00:33:44 +0800] “GET http://phpsong.com HTTP/1.1” 403 162 “-” “Java/1.7.0_65” –
這個明顯是java寫的蜘蛛,果斷的禁止掉
QQ交流群:136351212
檢視原文:http://www.phpsong.com/2414.html