DZ論壇SEO蜘蛛爬行問題。

qq3853383 · 發表于 2023-7-20 23:28:51

幫忙看下這個如何處理，規則要怎么寫才能讓蜘蛛不訪問這些鏈接，每天各大搜索引擎的蜘蛛就關爬這些鏈接都上千條。

我感覺這爬的讓我各項搜索引擎被降權了，收錄，牽引都停止了。。大佬幫幫忙，這個問題還是挺嚴重的。

我知道答案回答被采納將會獲得1 貢獻已有4人回答

龍二哥 · 發表于 2023-8-7 16:55:53

看網站日志分析。

amw123456789 · 發表于 2023-8-7 10:51:46

celover 發表于 2023-7-21 08:10
這估計是假蜘蛛，偽裝的

40.77.167.48

52.167.144.157

這倆是真蜘蛛嗎，每天抓我的網站

天外飄仙 · 發表于 2023-7-21 09:26:21

先看你服務器負載是否高；服務器負載不高的話可以不予理會！

如果你的服務器是按量付費的……可以看看這些ip是不是假蜘蛛，是的話屏蔽一下就行了

celover · 發表于 2023-7-21 08:10:40

這估計是假蜘蛛，偽裝的

久久久久av_欧美日韩一区二区在线_国产精品三区四区_日韩中字在线