2018-12-24 14:11:27 未知
有时网站运行中会出现死链接,死链接过多会影响搜索引擎蜘蛛的爬行,从而影响网站的整体质量。幸运的是,现在许多站长工具都提供了死链接检测工具,死链接已无所遁形。网站检查如果没有死链固然好;但如果检查出来了该怎么办呢?
1 通过robots协议解决死链问题
只要在robots协议添加一条:“disallow:死链接URL ”就可以了。但也有一个缺点因为obots协议生效有一个时间缓冲期,过多的死链会增加robots协议的体积。
2 通过自定义404页来解决死链问题。
当访问站内页面出错时,用自定义的404页面用于告诉蜘蛛链接已损坏,并且不会有大量的404错误返回代码。缺憾在于,如果网站的死链没有解决并且继续存在,蜘蛛仍然会爬行这个链接。
3 百度工具栏有一个死链接提交工具,通过提交它禁止蜘蛛来爬行死链接。
只要提交,百度蜘蛛就永远不会爬行这个链接。最重要的是,因为这是提交给百度的,不会占用网站上的任何空间,而且生效时间非常快。缺憾在于:只针对百度搜索引擎。
这些都是死链接的解决方案。一般来说,网站上有很多死链接。要么是人为错误,要么是网站程序本身存在问题和错误。最好的办法是尽快解决死链。