久久久久av_欧美日韩一区二区在线_国产精品三区四区_日韩中字在线

返回列表 發(fā)帖
查看: 1122|回復(fù): 2

[求助] 請(qǐng)問(wèn)如何禁谷歌和必應(yīng)的蜘蛛搜索引擎

5

主題

8

回帖

14

積分

初學(xué)乍練

貢獻(xiàn)
0 點(diǎn)
金幣
0 個(gè)
樓主
發(fā)表于 2023-8-10 23:48:40 | 只看樓主 |倒序?yàn)g覽 |閱讀模式
必應(yīng)每天都有幾千個(gè)爬行記錄,就是老個(gè)人資料


robots.txt我這樣寫對(duì)么,大佬幫糾正一下

#
# robots.txt for Discuz! X3
#

User-agent: *
Allow: /data/attachment/
Allow: /data/cache/
Allow: /uc_server/data/avatar/
Disallow: /api/
Disallow: /data/
Disallow: /source/
Disallow: /install/
Disallow: /template/default/
Disallow: /config/
Disallow: /uc_client/
Disallow: /uc_server/
Disallow: /admin.php
Disallow: /search.php
Disallow: /member.php
Disallow: /api.php
Disallow: /misc.php
Disallow: /connect.php
Disallow: /forum.php?mod=redirect*
Disallow: /forum.php?mod=post*
Disallow: /*?mod=misc*
Disallow: /*?mod=attachment*
Disallow: /*mobile=yes*
Disallow: */home
Disallow: */home.php?mod=spacecp*
Disallow: */home.php?mod=profile*

User-agent: Googlebot
Disallow: /

User-agent: bingbot
Disallow: /

User-agent: manbot
Disallow: /

我知道答案 回答被采納將會(huì)獲得1 貢獻(xiàn) 已有2人回答
回復(fù)

使用道具 舉報(bào)

5

主題

8

回帖

14

積分

初學(xué)乍練

貢獻(xiàn)
0 點(diǎn)
金幣
0 個(gè)
沙發(fā)
 樓主| 發(fā)表于 2023-8-11 09:45:01 | 只看Ta
11111111111
回復(fù)

使用道具 舉報(bào)

11

主題

25

回帖

48

積分

初學(xué)乍練

貢獻(xiàn)
0 點(diǎn)
金幣
10 個(gè)
板凳
發(fā)表于 2024-7-11 14:55:32 | 只看Ta
現(xiàn)在百度不給站長(zhǎng)活路,bing還算友好了,。至少大部分站點(diǎn)的bing流量已經(jīng)超越百度了。,你還禁止bing抓取
回復(fù)

使用道具 舉報(bào)

本版積分規(guī)則

  • 關(guān)注公眾號(hào)
  • 有償服務(wù)微信
  • 有償服務(wù)QQ

手機(jī)版|小黑屋|Discuz! 官方交流社區(qū) ( 皖I(lǐng)CP備16010102號(hào) |皖公網(wǎng)安備34010302002376號(hào) )|網(wǎng)站地圖|star

GMT+8, 2025-7-2 05:08 , Processed in 0.049418 second(s), 12 queries , Redis On.

Powered by Discuz! W1.0 Licensed

Cpoyright © 2001-2025 Discuz! Team.

關(guān)燈 在本版發(fā)帖
有償服務(wù)QQ
有償服務(wù)微信
返回頂部
快速回復(fù) 返回頂部 返回列表