DZ論壇SEO蜘蛛爬行問題。

qq3853383

幫忙看下這個(gè)如何處理，規(guī)則要怎么寫才能讓蜘蛛不訪問這些鏈接，每天各大搜索引擎的蜘蛛就關(guān)爬這些鏈接都上千條。


我感覺這爬的讓我各項(xiàng)搜索引擎被降權(quán)了，收錄，牽引 都停止了。。大佬幫幫忙，這個(gè)問題還是挺嚴(yán)重的。

登錄/注冊后可看大圖

我知道答案 回答被采納將會(huì)獲得1 貢獻(xiàn) 已有4人回答

celover

這估計(jì)是假蜘蛛，偽裝的

天外飄仙

先看你服務(wù)器負(fù)載是否高； 服務(wù)器負(fù)載不高的話 可以不予理會(huì)！

如果你的服務(wù)器 是按 量付費(fèi)的……可以看看這些ip是不是假蜘蛛， 是的話 屏蔽一下就行了

amw123456789

celover 發(fā)表于 2023-7-21 08:10
這估計(jì)是假蜘蛛，偽裝的

登錄/注冊后可看大圖

40.77.167.48

52.167.144.157

這倆是真蜘蛛嗎，每天抓我的網(wǎng)站

龍二哥

看網(wǎng)站日志分析。