|
本帖最后由 科站網(wǎng) 于 2024-4-19 17:15 編輯
被刷PV無非兩種情況
第一種:蜘蛛的爬取
以W某站長訪問記錄為例
截圖202404191705087921.jpg (370.53 KB, 下載次數(shù): 172)
下載附件
2024-4-19 17:05 上傳
通過User-Agent可以很明顯看到有明顯的標(biāo)志告訴,這是機(jī)器,通過搜索AhrefsBot和semrush就可以找到封禁方法
通過文章,我們可以看到,都提到了robots打卡網(wǎng)站后臺(tái),點(diǎn)擊插件,點(diǎn)擊安裝“robots在線編輯”
加入文章提到的robots規(guī)則,其他蜘蛛可以搜索對(duì)應(yīng)蜘蛛的特征去查找
第二種:不知名的爬蟲
這種往往是不遵循robots規(guī)則的或者IP較為固定的
特征其實(shí)也很明顯,訪問的地址正常打卡沒什么用或者在短時(shí)間內(nèi)訪問的都是PHP地址,而沒有靜態(tài)資源(圖片、js、css)地址
比如下面某W站長的訪問記錄
截圖202404191711552024.jpg (602.94 KB, 下載次數(shù): 173)
下載附件
2024-4-19 17:11 上傳
|
|