客服
如何批量檢測被百度收錄的死鏈的方法
前段時(shí)間服務(wù)器被入侵，掛了很多博彩之類(lèi)的黑頁(yè)，而且全部被百度收錄。
現在把漏洞補好了，但刪除黑頁(yè)文件以后成了死鏈，要怎么讓百度刪除收錄呢?
在網(wǎng)上找了一下，似乎只有檢測網(wǎng)址是否被收錄的工具，而沒(méi)有檢測收錄的是不是死鏈的工具。
自己理清了下思路，找辦法找出了所有被收錄的死鏈，并寫(xiě)下這篇文章。
不知道有沒(méi)有更好的方法，大家可以告訴我，先分享給大家，如果有大神請忽視或者告訴我更好的方法，一起學(xué)習交流吧。
下面教程開(kāi)始
先在百度找到xenu可以模擬爬蟲(chóng)爬取所有連接，我下載了個(gè)漢化版。
我們先用這個(gè)工具查詢(xún)所有被收錄的頁(yè)面。
打開(kāi)軟件，填入簡(jiǎn)版百度site網(wǎng)站地址，之所以用簡(jiǎn)版是可以減少鏈接查詢(xún)時(shí)間和內容。(請把xxx.bizcn.com換成你的網(wǎng)址)
http://www.baidu.com/s?ie=utf-8&tn=baidulocal&wd=site%3Axxx.bizcn.com
等待檢測完成。
點(diǎn)擊導出為制表符分隔的文件。
導出的文件，我們可以看到格式是:網(wǎng)址+空格+狀態(tài)碼
那么寫(xiě)一個(gè)正則，把需要的網(wǎng)址提取出來(lái)就行，比如www.baidu.com下的404頁(yè)面就是
/http:\/\/www.baidu.com(.*?)\s404/i
(以http://www.baidu.com開(kāi)頭,\s代表空格,404,/i代表匹配大小寫(xiě))
不會(huì )正則怎么辦?
為了方便大家，我把文件作了修改，大家只要把head改成標致性開(kāi)頭，state改成狀態(tài)碼就行，file改成導出的文件路徑就行。西安網(wǎng)站建設推薦閱讀>>> 如何正確使用死鏈提交工具,
head怎么改，舉個(gè)例子,
你的網(wǎng)站是http://www.baidu.com/abc.html，那么你就寫(xiě)http://www.baidu.com/
你的網(wǎng)站是http://abc.baidu.com/abc.html，那么你就寫(xiě)http://abc.baidu.com/
把正則寫(xiě)入php，在php環(huán)境下運行g(shù)et.php。那么結果就出來(lái)了。
這時(shí)你只需要全選，復制到一個(gè)txt文件，上傳到網(wǎng)站空間，再到百度站長(cháng)平臺死鏈提交填入文件路徑就行就可以。
我們知道，思路是通過(guò)爬取找出所有被收錄的鏈接，然后按條件列出來(lái)而已。西安網(wǎng)站建設推薦閱讀>>> 死鏈的產(chǎn)生的原因_死鏈對網(wǎng)站seo的影,
這樣的話(huà)，只要把開(kāi)頭輸入的site網(wǎng)址改一下，也可以查詢(xún)其他搜索引擎的收錄。
把正則改一下，可以獲得如標題等其他內容。在此就不一一敘述。西安做網(wǎng)站推薦閱讀>>> 手把手教您制作死鏈列表文件,
相關(guān)文章：
-
在學(xué)習SEO的時(shí)候我們會(huì )接觸鏈接這個(gè)東西，在SEO界鏈接基本分為內鏈、外鏈（友情鏈接也被稱(chēng)為外鏈）、反鏈、死鏈四大類(lèi)。那么，我為何要單獨闡述死鏈這個(gè)東西呢？因為死鏈是當內鏈和外...
-
在網(wǎng)站日常運營(yíng)，死鏈是難免會(huì )產(chǎn)生的，不僅影響了用戶(hù)體驗，也影響了搜索效果；針對這一現象，我們邀請了站長(cháng)社區版主三木為大家分享死鏈處理心得。 本文主要講述死鏈對網(wǎng)站的影響；...
-
在第四次深度接觸結束后，spider工程師表示新浪的死鏈處理工作一直效果不錯，提醒學(xué)院應該請其做個(gè)分享。新浪穩座國家級門(mén)戶(hù)頭把交椅，誰(shuí)還敢說(shuō)自己網(wǎng)站結構的復雜程度可以超越新浪。...
-
大量死鏈對搜索引擎來(lái)講，有什么影響? 1、幾乎很多站都避免不了存在死鏈接，但死鏈率過(guò)高，會(huì )影響搜索引擎對網(wǎng)站的評分。 2、搜索引擎對每個(gè)網(wǎng)站每天抓取的頻次是限額的，若網(wǎng)站存在大...
-
幾乎所有網(wǎng)站都會(huì )出現不再需要展現的網(wǎng)頁(yè)，如何處理這樣的網(wǎng)頁(yè)也成為站長(cháng)經(jīng)常談?wù)摰脑?huà)題。為此，百度站長(cháng)學(xué)院專(zhuān)訪(fǎng)了負責死鏈識別處理的工程師，了解到百度眼中的死鏈其實(shí)包括三種：...
-
上次說(shuō)到如何正確設置死鏈，關(guān)鍵點(diǎn)在于http狀態(tài)碼一定要迅速返回，不要有延遲，那么接下來(lái)使用百度站長(cháng)平臺提供的死鏈提交工具要注意什么呢？ 昨天百度站長(cháng)平臺又接到了反饋，站長(cháng)說(shuō)死...
-
在學(xué)習SEO的時(shí)候我們會(huì )接觸鏈接這個(gè)東西，在SEO界鏈接基本分為內鏈、外鏈（友情鏈接也被稱(chēng)為外鏈）、反鏈、死鏈四大類(lèi)。那么，我為何要單獨闡述死鏈這個(gè)東西呢？因為死鏈是當內鏈和外...
-
最近頻繁接到某站長(cháng)反饋：已對自己論壇的垃圾帖做死鏈處理、并已使用百度站長(cháng)平臺提供的死鏈提交工具，但相關(guān)鏈接依然未得到處理。經(jīng)百度站長(cháng)平臺追查，發(fā)現該站長(cháng)提供的所謂死鏈并...
-
第一步，處理網(wǎng)站已存在的死鏈，制作死鏈文件篩查網(wǎng)站內部存在的死鏈，并將這些死鏈頁(yè)面設置成為404頁(yè)面，即百度訪(fǎng)問(wèn)它們時(shí)返回404代碼。將需提交的死鏈列表制作成一個(gè)死鏈文件，制作...
-
一、死鏈介紹 1、什么是死鏈 頁(yè)面已經(jīng)無(wú)效，無(wú)法對用戶(hù)提供任何有價(jià)值信息的頁(yè)面就是死鏈接，包括協(xié)議死鏈和內容死鏈兩種形式。 協(xié)議死鏈：頁(yè)面的TCP協(xié)議狀態(tài)/HTTP協(xié)議狀態(tài)明確表示的死...