久久久久av_欧美日韩一区二区在线_国产精品三区四区_日韩中字在线

Discuz! 官方交流社區(qū)

標(biāo)題: 求助！關(guān)于分類信息修改變量名后蜘蛛抓取鏈接問題 [打印本頁(yè)]

作者: dm360 時(shí)間: 2022-8-7 00:21
標(biāo)題: 求助！關(guān)于分類信息修改變量名后蜘蛛抓取鏈接問題
求助！關(guān)于分類信息修改變量名后蜘蛛抓取鏈接問題
域名/66-sortid-4-a0-2-b3-24-b4-7.html 精簡(jiǎn)變量名稱后的鏈接
域名/66-sortid-4-a0-2-b3-24-b4-7-fenlei-41-geshi-8-render-2-xingzhi-2-page-7.html 蜘蛛抓取的鏈接：在上方真是鏈接后增加了一部分以前沒修改變量名時(shí)候的舊的變量名。蜘蛛一直爬這種新變量+已經(jīng)不存在的舊變量的組合鏈接，怎么讓他抓取正確的鏈接呢(第一個(gè)鏈接)？

疑問：是discuz的數(shù)據(jù)庫(kù)啥的在分類信息的變量名修改過后還會(huì)殘留舊變量名在庫(kù)里？導(dǎo)致蜘蛛抓取錯(cuò)誤的鏈接？還是其他的什么原因啊？
求大神來解答一下，萬分感激！

作者: 天外飄仙 時(shí)間: 2022-8-7 08:51
建議做一下 301重定向呢；批量將舊鏈接 301跳轉(zhuǎn)到新鏈接就可以了

作者: dm360 時(shí)間: 2022-8-7 21:32

天外飄仙發(fā)表于 2022-8-7 08:51
建議做一下 301重定向呢；批量將舊鏈接 301跳轉(zhuǎn)到新鏈接就可以了

這個(gè)不太好做的，分類信息里有好幾層參數(shù)，每一層都有好多個(gè)變量，組合起來少則幾千多則幾萬條鏈接。畢竟分類信息篩選是可以自由組合篩選的么。
這幾千上萬的鏈接，做301規(guī)則太難了，因?yàn)橐?guī)則本身就不好寫。組合方式太復(fù)雜了。

作者: 天外飄仙 時(shí)間: 2022-8-8 07:25

dm360 發(fā)表于 2022-8-7 21:32
這個(gè)不太好做的，分類信息里有好幾層參數(shù)，每一層都有好多個(gè)變量，組合起來少則幾千多則幾萬條鏈接。畢竟 ...

規(guī)則要用正則匹配的……
涉及幾千萬鏈接都不是問題的……如果你不懂正則的話就花錢雇人幫你寫吧;

作者: dm360 時(shí)間: 2022-8-8 13:36

天外飄仙發(fā)表于 2022-8-8 07:25
規(guī)則要用正則匹配的……
涉及幾千萬鏈接都不是問題的……如果你不懂正則的話就花錢雇人幫你寫吧;
...

那除了301 從根源上無法解決這個(gè)問題了嗎？到底是dz本身問題，還是蜘蛛歷史爬行記憶問題呢？

作者: 天外飄仙 時(shí)間: 2022-8-8 15:07

dm360 發(fā)表于 2022-8-8 13:36
那除了301 從根源上無法解決這個(gè)問題了嗎？到底是dz本身問題，還是蜘蛛歷史爬行記憶問題呢？ ...

蜘蛛爬行記憶問題；最好是301重定向一下；不做301 以后蜘蛛應(yīng)該也會(huì)慢慢的改過來，畢竟已經(jīng)沒有舊鏈接的入口了

作者: dm360 時(shí)間: 2022-8-8 15:22

天外飄仙發(fā)表于 2022-8-8 15:07
蜘蛛爬行記憶問題；最好是301重定向一下；不做301 以后蜘蛛應(yīng)該也會(huì)慢慢的改過來，畢竟已經(jīng)沒有舊鏈 ...

已經(jīng)改了好幾個(gè)月了，蜘蛛還是沒變過來，是所有的蜘蛛，百度 bing sougou 谷歌等等都是這樣的，很難不懷疑，難道所有的蜘蛛都有記憶問題？不會(huì)自動(dòng)抓取新的鏈接嗎、。

作者: 天外飄仙 時(shí)間: 2022-8-8 17:07

dm360 發(fā)表于 2022-8-8 15:22
已經(jīng)改了好幾個(gè)月了，蜘蛛還是沒變過來，是所有的蜘蛛，百度 bing sougou 谷歌等等都是這樣的，很難不 ...

主動(dòng) 提交一下新鏈接給蜘蛛試試呢

作者: dm360 時(shí)間: 2022-8-9 01:14

天外飄仙發(fā)表于 2022-8-8 17:07
主動(dòng) 提交一下新鏈接給蜘蛛試試呢

試過了沒有用連續(xù)試了一星期后面依然是抓取錯(cuò)誤的組合鏈接。

歡迎光臨 Discuz! 官方交流社區(qū) (http://www.9999xn.com/)

<li id="ccwuk"></li>