网站死链怎么彻底清除？

Question

如题所述

Answer 1

　　死链必须要及时的清理
　　找出死链使用站长工具检测网站的链接，找出网站存在的死链。使用站长工具可以知道网站有多少死链
　　建立robots.txt 屏蔽死链
　　有了死链，我们可以让 robots.txt 禁止蜘蛛爬行这些页面，把所有的死链建一个文件夹，让
　　robots.txt 屏蔽掉，阻止蜘蛛的爬行，但是还是一样，要把所有的链接加进入，网站的发展，
　　这样做也是比较麻烦的，robots.txt 的写法:
　　User-agenr:*
　　Disallow: /目录
　　Disallow: /目录
　　制作404 页面
　　死链的出现，你一不注意的话，就发生，如果你不是经常关注死链问题，那你就要给自己网站找个盾牌，给自己挡挡。像站长之家的404 页面，很生动又很幽默，如果是用户看见了也不会认为这个页面不良好，还会笑一笑，用户体验也会比较好，站在搜索引擎的角度，蜘蛛看见404 状态码，还会继续爬行网站，不会马上就跑掉了。死链提交百度也算是比较好，推出了死链提交工具，好让百度删除我们的死链，特别对一些已收录的死链。

Answer 2

对于已经收录的文章发现死链，处理办法是：
其一，在根目录的robots.txt文件中设置disallow，禁止蜘蛛访问死链的目录。
其二。如果页面少就把链接提交给百度。
其三，设置成404页面。404、301是搜索引擎和网页之间的语言，404称为状态码，搜索引擎抓取后就会从数据库删除这条索引。