百度收錄死鏈批量檢測(cè)方法
站長(zhǎng)朋友經(jīng)常會(huì)遇到服務(wù)器被入侵,掛了很多購(gòu)彩之類的黑頁(yè),而且全部被百度收錄。把漏洞補(bǔ)好了,但刪除黑頁(yè)文件以后成了死鏈,要怎么讓百度刪除收錄呢?在網(wǎng)上找了一下,似乎只有檢測(cè)網(wǎng)址是否被收錄的工具,而沒有檢測(cè)收錄的是不是死鏈的工具。
小編理清了下思路,找辦法找出了所有被收錄的死鏈,再盡可能全面地通過百度站長(zhǎng)平臺(tái)死鏈提交工具提交死鏈,網(wǎng)站在百度搜索引擎的可訪性和價(jià)值得到提升,以獲得更高的用戶評(píng)價(jià)。
下面教程開始
1.使用Xenu(點(diǎn)擊下載)查詢所有被收錄的頁(yè)面。
(1)打開軟件,填入簡(jiǎn)版百度site網(wǎng)站地址,之所以用簡(jiǎn)版是可以減少鏈接查詢時(shí)間和內(nèi)容。
http://www.baidu.com/s?ie=utf-8&tn=baidulocal&wd=site%3Awww.aoyou183.cn(請(qǐng)把www.aoyou183.cn換成你的網(wǎng)址)
(2)等待檢測(cè)完成。
(3)點(diǎn)擊導(dǎo)出為制表符分隔的文件。
(4)導(dǎo)出的文件,我們可以看到格式是:網(wǎng)址+空格+狀態(tài)碼
2.正則提取網(wǎng)址
那么寫一個(gè)正則,把需要的網(wǎng)址提取出來就行,比如www.baidu.com下的404頁(yè)面就是
/http://www.baidu.com(.*?)s404/i
(以http://www.baidu.com開頭,s代表空格,404,/i代表匹配大小寫)
不會(huì)正則怎么辦?
為了方便大家,我把文件作了修改,大家只要把head改成標(biāo)致性開頭,state改成狀態(tài)碼就行,file改成導(dǎo)出的文件路徑就行。
head怎么改,舉個(gè)例子,
你的網(wǎng)站是http://www.baidu.com/abc.html,那么你就寫http://www.baidu.com/
你的網(wǎng)站是http://abc.baidu.com/abc.html,那么你就寫http://abc.baidu.com/
把正則寫入php,在php環(huán)境下運(yùn)行g(shù)et.php。那么結(jié)果就出來了。
這時(shí)你只需要全選,復(fù)制到一個(gè)txt文件,上傳到網(wǎng)站空間,再到百度站長(zhǎng)平臺(tái)死鏈提交填入文件路徑就行就可以。
我們知道,思路是通過爬取找出所有被收錄的鏈接,然后按條件列出來而已。
這樣的話,只要把開頭輸入的site網(wǎng)址改一下,也可以查詢其他搜索引擎的收錄。
把正則改一下,可以獲得如標(biāo)題等其他內(nèi)容。在此就不一一敘述。