如何防止蜘蛛天天爬網站

crx349 · 發(fā)表于 2024-7-27 17:13:55

人民群眾發(fā)表于 2024-7-27 16:55
是根據板塊關閉還是全局站點呢？

游客訪問權限改成 0 就自動屏蔽蜘蛛了

ksy · 發(fā)表于 2024-7-29 07:52:17

人民群眾發(fā)表于 2024-7-26 18:13
用的是bt環(huán)境面板

寶塔被挖出來過有后門，夜間偷偷傳輸數(shù)據，建議轉1panel

ksy · 發(fā)表于 2024-7-29 07:53:28

可以試試改Robots.txt

油管 · 發(fā)表于 2024-7-29 09:58:23

ksy 發(fā)表于 2024-7-29 07:52
寶塔被挖出來過有后門，夜間偷偷傳輸數(shù)據，建議轉1panel

不要臉的營銷

人民群眾 · 發(fā)表于 2024-8-3 14:08:37

游客改成0不行啊，還是一樣有蜘蛛請求。

港城君 · 發(fā)表于 2024-8-3 17:18:19

蜘蛛天天爬網站

------------------------

是指國外IP在論壇注冊新會員的意思嗎？

470342341 · 發(fā)表于 2024-8-4 20:48:04

人民群眾發(fā)表于 2024-7-27 17:02
ip規(guī)則沒有用的，經常換。

攔截 ip 攔截 UA 找找規(guī)律可以攔截的當然前提是蜘蛛，如果是惡意攻擊掃描隨機訪問頁面隨機 UA ip 也是海量就沒有辦法了。只能開 cc了網站備案的話上個免費的國內 cdn 防護下或者收費的沒備案的話用 cf吧不過國內訪問速度回慢些

IsaacZ · 發(fā)表于 2024-8-6 23:43:19

我只知道百度蜘蛛，可以去站點管理_站長工具_百度搜索資源平臺調整抓取頻次上限：

IsaacZ · 發(fā)表于 2024-8-7 00:16:13

我以為蜘蛛爬網是好事。

天外飄仙 · 發(fā)表于 2024-8-7 09:19:12

IsaacZ 發(fā)表于 2024-8-7 00:16
我以為蜘蛛爬網是好事。

真蜘蛛是好事！假蜘蛛就是攻擊了

久久久久av_欧美日韩一区二区在线_国产精品三区四区_日韩中字在线