久久久久av_欧美日韩一区二区在线_国产精品三区四区_日韩中字在线

Discuz! 官方交流社區

標題: 如何防止蜘蛛天天爬網站 [打印本頁]

作者: 人民群眾 時間: 2024-7-26 17:19
標題: 如何防止蜘蛛天天爬網站
如上
24小時都在請求，煩死了

作者: 港城君 時間: 2024-7-26 17:23
不懂就問：

蜘蛛天天爬網站是什么

作者: 科站網 時間: 2024-7-26 17:29
https://www.cnblogs.com/10zhan/p/17010681.html

作者: 人民群眾 時間: 2024-7-26 18:13

科站網發表于 2024-7-26 17:29
https://www.cnblogs.com/10zhan/p/17010681.html

還是攔不住，

作者: 人民群眾 時間: 2024-7-26 18:13
用的是bt環境面板

作者: myboss 時間: 2024-7-26 18:18

人民群眾發表于 2024-7-26 18:13
還是攔不住，

可能是被AI爬蟲攻擊了

趕走它們就好了

作者: crx349 時間: 2024-7-27 12:36
關閉游客訪問就可以了

作者: amw111 時間: 2024-7-27 12:59

人民群眾發表于 2024-7-26 18:13
用的是bt環境面板

下載百變蜘蛛記錄https://addon.dismall.com/plugins/k_spider.html 看下那些蜘蛛爬，寶塔-安全-IP規則，（66.249.0.0/16）禁止了最有效

作者: 人民群眾 時間: 2024-7-27 16:55

crx349 發表于 2024-7-27 12:36
關閉游客訪問就可以了

是根據板塊關閉還是全局站點呢？

作者: 人民群眾 時間: 2024-7-27 17:02

amw111 發表于 2024-7-27 12:59
下載百變蜘蛛記錄https://addon.dismall.com/plugins/k_spider.html 看下那些蜘蛛爬，寶塔-安全-IP規則， ...

ip規則沒有用的，經常換。

作者: crx349 時間: 2024-7-27 17:13

人民群眾發表于 2024-7-27 16:55
是根據板塊關閉還是全局站點呢？

游客訪問權限改成 0 就自動屏蔽蜘蛛了

作者: ksy 時間: 2024-7-29 07:52

人民群眾發表于 2024-7-26 18:13
用的是bt環境面板

寶塔被挖出來過有后門，夜間偷偷傳輸數據，建議轉1panel

作者: ksy 時間: 2024-7-29 07:53
可以試試改Robots.txt

作者: 油管 時間: 2024-7-29 09:58

ksy 發表于 2024-7-29 07:52
寶塔被挖出來過有后門，夜間偷偷傳輸數據，建議轉1panel

不要臉的營銷

作者: 人民群眾 時間: 2024-8-3 14:08
游客改成0不行啊，還是一樣有蜘蛛請求。

作者: 港城君 時間: 2024-8-3 17:18
蜘蛛天天爬網站

------------------------

是指國外IP在論壇注冊新會員的意思嗎？

作者: 470342341 時間: 2024-8-4 20:48

人民群眾發表于 2024-7-27 17:02
ip規則沒有用的，經常換。

攔截 ip 攔截 UA 找找規律可以攔截的當然前提是蜘蛛，如果是惡意攻擊掃描隨機訪問頁面隨機 UA ip 也是海量就沒有辦法了。只能開 cc了網站備案的話上個免費的國內 cdn 防護下或者收費的沒備案的話用 cf吧不過國內訪問速度回慢些

作者: IsaacZ 時間: 2024-8-6 23:43

我只知道百度蜘蛛，可以去站點管理_站長工具_百度搜索資源平臺調整抓取頻次上限：

(, 下載次數: 19)

作者: IsaacZ 時間: 2024-8-7 00:16
我以為蜘蛛爬網是好事。

作者: 天外飄仙 時間: 2024-8-7 09:19

IsaacZ 發表于 2024-8-7 00:16
我以為蜘蛛爬網是好事。

真蜘蛛是好事！假蜘蛛就是攻擊了

歡迎光臨 Discuz! 官方交流社區 (http://www.9999xn.com/)