企业可以在做SEO的会接触到网络链接通过这部分内容,在SEO界链接进行基本方法分为内链、外链(友情以及链接)、反链、死链四大类。许多人认为只有页面不存在(404页)才叫死链,其实并非如此。死链接是无法到达的链接,也称为无效连接。死链不仅影响用户体验,还会影响搜索结果。
本文主要讲述死链对网站的影响;死链是如何产生的;如何发现死链;如何正确处理死链。
1、死链接率过高,会影响搜索引擎对网站的评分。
2、搜索引擎对每个企业网站可以每天抓取的频次是限额的,若网站管理存在需要大量死链,会浪费掉抓取配额并影响以及其他国家正常页面的抓取。
3、 过多的死链接对网站用户来讲也是体验不好的表现。
编辑错误或程序员的粗心导致页面生成一个不存在的页面。
4、网站短暂无法访问
由于服务器、空间或程序问题,站点暂时无法访问,导致大量服务器错误页面,返回代码以5开头。
5、外部链接错误
用户或者站长在站外发布了错误URL: 别的网站复制或采集了含有错误链接的页面。
6、爬虫提取了不完整的URL
个别爬虫在提取页面URL时,因为URL中有不规则字符或者URI,与后边的文字链接起来,导致URL失效。
7、网站改版
如果你的网站已经被修改或将要被修改,一定要注意死链问题,很多网站被修改,在旧页面直接删除之前,导致大量的死链链接。
8、管理员删除页面
网站管理员删除被黑的、广告的、过时的、泛滥的页面,导致很多死链接。
9、百度站长工具中的抓取异常工具可以查看最近一个月产生的各种死链并支持导出功能。
使用相关爬虫软件,比如Xenu,SEO推广此类工具可以爬取全站所有链接并分析页面状态,分析完成后,支持导出功能,提取死链接即可。
10、在网站特别是论坛的运营中,经常需要删除一些页面,在删除页面时,需要记录相应的URL,以便在后期提交死链接。
通过上述两种办法提取的死链接列表,一定要经过删除和验证,例如用表格进行删除重复链接,然后再使用 HTTP状态码批量查询工具验证下是否确实是死链接。
网站重建最容易产生死链
改版前的页面如果有价值,尽量不要删除和修改URL,若需要更换域名或URL分配规则,一定要将之前的URL进行301跳转到对应的URL:在深圳网站建设中若老的数据必须删除,那删除的所有页面URL要进行整理和提交死链。
1、对发现的死链接如何处理
将收集好的所有死链接粘贴到网站根目录的一个文档中,再把文档地址提交到百度站长工具一网页抓取一死链提交一添加新数据一填写死链文件地址;若大量死链具有一定的规则,如某个目录下全部为死链接,则可提交规则死链接。
2、在百度站长工具中提交死链前一定要确保提交的死链数据不存在活链接。一旦企业存在活链,会显示提交失败导致我们无法进行删除。
3、由于很多网站程序问题,很多打不开的页面返回码并非404,这是一个大问题,比如明明是打不开的页面返回码是301、200、500,如果是200的话,会导致网站中出现不同URL获取相同内容。比如我的一个站,社区的帖子删除后,返潍坊网站建设公司回码却是500,后期发现了,立马进行了处理。大家尽量找出所有错误URL格式,.并设置打开后HTTP状态码为404。
4、把所有的错误页面找到后,一定要寻找此类页面URL相同特征,并且和正常页面的特征有区分,写对应规则到robots文件中,禁止蜘蛛抓取,就算你已经在站长工具中提交了死链,也建议robots封禁抓取。
5、robots只能解决蜘蛛不再抓取此类页面,但解决不了已经收录页面的快照删除问题,若你的网站被黑,删除了被黑页面,除了robots封禁被黑页面外,还应该将这些页面提交死链。提交死链是删除被攻击页面快照的最快方式。