网站备案 | 公司简介
张家口网站制作-全国统一热线:13730986092 服务热线:13730986092
当前位置:张家口网站制作 > 建站知识 > 网站推广 >
客服①:惠誉科技业务人员在线洽谈
客户评价
公司动态 网站建设 网站推广 网页设计 解决方案 css知识 空间域名 行业新闻 程序开发 相关下载
批量检测被百度收录的死链的方法
文章出自:未知     发布时间:2016-09-21 15:23

权重越高的网站死链接越少,空页面也少,相关内容越多。

前段时间网站改版,由旅游网站改为了资讯站,期间还测试过destoon程序,而且被百度收录了,现在重新做站,好多死链接,怎么去除这些死链接,只能求助百度收录的那些了,如果用xenu搜站内的话,只能找到站内死链接,没啥用。

在网上找了一下,似乎只有检测网址是否被收录的工具,而没有检测收录的是不是死链的工具。

自己理清了下思路,找办法找出了所有被收录的死链,并写下这篇文章。

不知道有没有更好的方法,大家可以告诉我,先分享给大家,如果有大神请忽视或者告诉我更好的方法,一起学习交流吧。

下面教程开始

先在百度找到xenu可以模拟爬虫爬取所有连接,我下载了个汉化版。

我们先用这个工具查询所有被收录的页面。

打开软件,填入简版百度site网站地址,之所以用简版是可以减少链接查询时间和内容。(请把www.zjkhuiyu.com换成你的网址)

http://www.baidu.com/s?ie=utf-8&tn=baidulocal&wd=site%3Awww.zjkhuiyu.com
(某些版本需要去掉http://)

批量检测被百度收录的死链的方法 SEO推广 第1张

等待检测完成。

批量检测被百度收录的死链的方法 SEO推广 第2张

点击导出为制表符分隔的文件。

批量检测被百度收录的死链的方法 SEO推广 第3张

导出的文件,我们可以看到格式是:网址+空格+状态码

批量检测被百度收录的死链的方法 SEO推广 第4张

把记事本里的复制一下,然后新建一个excel,然后粘贴到里边,用表格筛选出404页面,然后保存到一个记事本文件里,保存为silian20160921.txt,上传到百度站长工具后台,死链提交处,等百度蜘蛛处理。

下边为会php程序的提取404方法,略显笨拙,不建议、

那么写一个正则,把需要的网址提取出来就行,比如www.baidu.com下的404页面就是

/http:\/\/www.baidu.com(.*?)\s404/i

(以http://www.baidu.com开头,\s代表空格,404,/i代表匹配大小写)

不会正则怎么办?

批量检测被百度收录的死链的方法 SEO推广 第5张

为了方便大家,我把文件作了修改,大家只要把head改成标致性开头,state改成状态码就行,file改成导出的文件路径就行。

head怎么改,举个例子,

你的网站是http://www.baidu.com/abc.html,那么你就写http://www.baidu.com/

你的网站是http://abc.baidu.com/abc.html,那么你就写http://abc.baidu.com/

把正则写入php,在php环境下运行get.php。那么结果就出来了。

批量检测被百度收录的死链的方法 SEO推广 第6张

这时你只需要全选,复制到一个txt文件,上传到网站空间,再到百度站长平台死链提交填入文件路径就行就可以。

批量检测被百度收录的死链的方法 SEO推广 第7张

我们知道,思路是通过爬取找出所有被收录的链接,然后按条件列出来而已。

这样的话,只要把开头输入的site网址改一下,也可以查询其他搜索引擎的收录。

把正则改一下,可以获得如标题等其他内容。在此就不一一叙述。


文章出自:张家口网站建设公司- 如转载请注明出处!
上一篇:【大拿分享】夜息分享视频1——技术驱动的SEO

下一篇:夜息:小议SEO的数据分析II – 如何改善网站收录

信息中心
News Center
相关信息
客户评价
最新案例
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
189-3284-622118932846221在线QQ咨询在线QQ咨询
咨询电话:137 3098 6092 手机:137 3098 6092
地址:张家口桥西区SOHO 网址:http://www.zjkhuiyu.com 邮箱:502815953@qq.com
版权所有 2010-2015(C) 张家口惠誉科技有限公司 保留所有权利