求助百度蜘蛛大量爬我的網(wǎng)站。一個將近10g流量都是蜘蛛

牧羊人 · 發(fā)表于 2019-9-5 20:30:24

求助百度蜘蛛大量爬我的網(wǎng)站。一天時間將近10g流量都是蜘蛛爬的。  我都不知道為什么中國蜘蛛老是來爬  以前一天還有幾十個帖子。爬打不開一個新帖子也沒有了。
原來用的虛擬主機，換成服務器的話  cpu2    硬盤50    寬帶  3m  夠不夠？
沒有用過服務器  不知道呀
知道的朋友路過看看謝謝  謝謝

牧羊人 · 發(fā)表于 2019-9-5 20:42:48

在線急等

牧羊人 · 發(fā)表于 2019-9-5 21:22:55

不用等大家回復了。我找到問題根源了。在百度站長平臺上，以前是一天蜘蛛抓取幾百次。最最近一月不知道怎么抽風了，一天平均將近20萬次，現(xiàn)在已經(jīng)設置最高不超過1300次了。應該可以了。

jnpar · 發(fā)表于 2019-9-8 23:05:40

抓的頻率那么高嗎？是好事啊

只看Ta · 發(fā)表于 2019-9-10 18:39:22

提示: 作者被禁止或刪除內(nèi)容自動屏蔽

牧羊人 · 發(fā)表于 2019-9-11 19:43:46

jnpar 發(fā)表于 2019-9-8 23:05
抓的頻率那么高嗎？是好事啊

事情倒是挺好，就是服務器受不了。樂極生悲大概就是如此現(xiàn)在好了

牧羊人 · 發(fā)表于 2019-9-11 19:44:04

ill01 發(fā)表于 2019-9-10 18:39
抓我 100G 都可以

能量量你的服務器配置嗎？

只看Ta · 發(fā)表于 2019-10-27 23:59:49

提示: 作者被禁止或刪除內(nèi)容自動屏蔽

ill01 該用戶已被刪除	5^# 發(fā)表于 2019-9-10 18:39:22 \| 只看Ta 提示: 作者被禁止或刪除內(nèi)容自動屏蔽
ill01 該用戶已被刪除
	回復贊使用道具舉報

ill01 該用戶已被刪除	8^# 發(fā)表于 2019-10-27 23:59:49 \| 只看Ta 提示: 作者被禁止或刪除內(nèi)容自動屏蔽
ill01 該用戶已被刪除
	回復贊使用道具舉報

久久久久av_欧美日韩一区二区在线_国产精品三区四区_日韩中字在线

求助百度蜘蛛大量爬我的網(wǎng)站。一個將近10g流量都是蜘蛛

相關(guān)帖子

產(chǎn)品服務

開發(fā)者服務

使用教程

久久久久av_欧美日韩一区二区在线_国产精品三区四区_日韩中字在线

求助 百度蜘蛛大量爬我的網(wǎng)站。一個將近10g流量都是蜘蛛

相關(guān)帖子

產(chǎn)品服務

開發(fā)者服務

使用教程

求助百度蜘蛛大量爬我的網(wǎng)站。一個將近10g流量都是蜘蛛