客服
如何批量检测被百度收录的死链的方法
前段时间服务器被入侵，挂了很多博彩之类的黑页，而且全部被百度收录。
现在把漏洞补好了，但删除黑页文件以后成了死链，要怎么让百度删除收录呢?
在网上找了一下，似乎只有检测网址是否被收录的工具，而没有检测收录的是不是死链的工具。
自己理清了下思路，找办法找出了所有被收录的死链，并写下这篇文章。
不知道有没有更好的方法，大家可以告诉我，先分享给大家，如果有大神请忽视或者告诉我更好的方法，一起学习交流吧。
下面教程开始
先在百度找到xenu可以模拟爬虫爬取所有连接，我下载了个汉化版。
我们先用这个工具查询所有被收录的页面。
打开软件，填入简版百度site网站地址，之所以用简版是可以减少链接查询时间和内容。(请把xxx.bizcn.com换成你的网址)
http://www.baidu.com/s?ie=utf-8&tn=baidulocal&wd=site%3Axxx.bizcn.com
等待检测完成。
点击导出为制表符分隔的文件。
导出的文件，我们可以看到格式是:网址+空格+状态码
那么写一个正则，把需要的网址提取出来就行，比如www.baidu.com下的404页面就是
/http:\/\/www.baidu.com(.*?)\s404/i
(以http://www.baidu.com开头,\s代表空格,404,/i代表匹配大小写)
不会正则怎么办?
为了方便大家，我把文件作了修改，大家只要把head改成标致性开头，state改成状态码就行，file改成导出的文件路径就行。西安网站建设推荐阅读>>> 如何正确使用死链提交工具,
head怎么改，举个例子,
你的网站是http://www.baidu.com/abc.html，那么你就写http://www.baidu.com/
你的网站是http://abc.baidu.com/abc.html，那么你就写http://abc.baidu.com/
把正则写入php，在php环境下运行get.php。那么结果就出来了。
这时你只需要全选，复制到一个txt文件，上传到网站空间，再到百度站长平台死链提交填入文件路径就行就可以。
我们知道，思路是通过爬取找出所有被收录的链接，然后按条件列出来而已。西安网站建设推荐阅读>>> 死链的产生的原因_死链对网站seo的影,
这样的话，只要把开头输入的site网址改一下，也可以查询其他搜索引擎的收录。
把正则改一下，可以获得如标题等其他内容。在此就不一一叙述。西安做网站推荐阅读>>> 手把手教您制作死链列表文件,
相关文章：
-
在学习SEO的时候我们会接触链接这个东西，在SEO界链接基本分为内链、外链（友情链接也被称为外链）、反链、死链四大类。那么，我为何要单独阐述死链这个东西呢？因为死链是当内链和外...
-
在网站日常运营，死链是难免会产生的，不仅影响了用户体验，也影响了搜索效果；针对这一现象，我们邀请了站长社区版主三木为大家分享死链处理心得。 本文主要讲述死链对网站的影响；...
-
在第四次深度接触结束后，spider工程师表示新浪的死链处理工作一直效果不错，提醒学院应该请其做个分享。新浪稳座国家级门户头把交椅，谁还敢说自己网站结构的复杂程度可以超越新浪。...
-
大量死链对搜索引擎来讲，有什么影响? 1、几乎很多站都避免不了存在死链接，但死链率过高，会影响搜索引擎对网站的评分。 2、搜索引擎对每个网站每天抓取的频次是限额的，若网站存在大...
-
几乎所有网站都会出现不再需要展现的网页，如何处理这样的网页也成为站长经常谈论的话题。为此，百度站长学院专访了负责死链识别处理的工程师，了解到百度眼中的死链其实包括三种：...
-
上次说到如何正确设置死链，关键点在于http状态码一定要迅速返回，不要有延迟，那么接下来使用百度站长平台提供的死链提交工具要注意什么呢？ 昨天百度站长平台又接到了反馈，站长说死...
-
在学习SEO的时候我们会接触链接这个东西，在SEO界链接基本分为内链、外链（友情链接也被称为外链）、反链、死链四大类。那么，我为何要单独阐述死链这个东西呢？因为死链是当内链和外...
-
最近频繁接到某站长反馈：已对自己论坛的垃圾帖做死链处理、并已使用百度站长平台提供的死链提交工具，但相关链接依然未得到处理。经百度站长平台追查，发现该站长提供的所谓死链并...
-
第一步，处理网站已存在的死链，制作死链文件筛查网站内部存在的死链，并将这些死链页面设置成为404页面，即百度访问它们时返回404代码。将需提交的死链列表制作成一个死链文件，制作...
-
一、死链介绍 1、什么是死链 页面已经无效，无法对用户提供任何有价值信息的页面就是死链接，包括协议死链和内容死链两种形式。 协议死链：页面的TCP协议状态/HTTP协议状态明确表示的死...