DZ論壇SEO蜘蛛爬行問題。

qq3853383

幫忙看下這個如何處理，規則要怎么寫才能讓蜘蛛不訪問這些鏈接，每天各大搜索引擎的蜘蛛就關爬這些鏈接都上千條。


我感覺這爬的讓我各項搜索引擎被降權了，收錄，牽引 都停止了。。大佬幫幫忙，這個問題還是挺嚴重的。

我知道答案 回答被采納將會獲得1 貢獻 已有4人回答

celover

這估計是假蜘蛛，偽裝的

天外飄仙

先看你服務器負載是否高； 服務器負載不高的話 可以不予理會！

如果你的服務器 是按 量付費的……可以看看這些ip是不是假蜘蛛， 是的話 屏蔽一下就行了

amw123456789

celover 發表于 2023-7-21 08:10
這估計是假蜘蛛，偽裝的

40.77.167.48

52.167.144.157

這倆是真蜘蛛嗎，每天抓我的網站

龍二哥

看網站日志分析。