网站改版、删掉几个栏目、或者从旧程序换到新程序,过段时间去站长平台一看,收录数字往下掉,关键词排名也跟着松了。不少站长这时候先去折腾外链、更新频率,其实更常见的原因藏在站内:改版留下的旧链接还在被搜索引擎抓,一个个返回打不开的状态。这些失效链接积得多了,抓取配额被白白占掉,搜索引擎对站点的评价也会慢慢变差。这篇按顺序讲清死链从哪来、怎么批量摸出来、每一类该怎么处理,以及提交之后的复查办法。
改版类站点里,死链的来源相当集中。一是旧程序的 URL 结构和新程序对不上,文章还是那篇文章,地址却变了,旧地址全部失效;二是删栏目、删专题时只删了入口页面,栏目下的旧文章链接还散落在站内和别人的转载里;三是分页、标签页这类动态地址,程序一换规则就变了,之前被抓过的一大批全都指向不存在的页面。还有一类容易忽略:站内导航、正文里的内链自己指向旧地址,访客点进去也是打不开。来源弄清楚,后面处理起来就不会漏。
处理之前先拿到一份完整清单,凭感觉一条条试效率太低。常用三条路子:一是站长平台的抓取异常或索引板块,那里会集中展示搜索引擎近期抓到的失效地址,直接导出就能用;二是用爬虫工具把全站链接抓一遍,凡是返回 404、超时状态的地址单独存一份;三是翻服务器日志,看哪些地址近期被反复请求却一直返回错误状态码。三条路子得到的结果合在一起去重,就是这份要处理的死链清单。清单里顺手记下每个地址的来源和原来的内容是什么,后面决定处理方式时要用。
拿到清单后别一刀切全删,按地址的性质分开处理。有对应新地址的,比如改版后换了 URL 结构的文章,做 301 跳转指到新地址,权重能顺着传过去,用户从旧链接进来也能看到内容;内容确实下线、也没有替代页面的,让服务器返回标准的 404 状态码,配一个能导航回首页和热门栏目的 404 页面,别用那种返回 200 的软 404;暂时拿不准要不要保留的,先保持 404,观察一段时间再决定要不要补内容。注意别把所有死链都 301 到首页,搜索引擎识别出来后反而可能被判定为作弊式跳转,得不偿失。
处理完服务器端,把整理好的死链清单通过站长平台的死链提交入口提交,搜索引擎会安排重新抓取和删除。提交后不是马上生效,一般要等几个抓取周期,期间别急着改来改去。复查时重点看两个数字:一是死链提交后的处理进度,二是抓取异常列表里失效地址的数量是不是在往下走。等收录数字回稳之后,再回头核对一遍站内内链,把还指向旧地址的链接顺手改掉,避免新的失效地址继续产生。
死链这件事,与其事后清理,不如在动作之前就留个心眼。改版前把新旧 URL 的对应关系整理成一张表,上线后按表配置跳转;删栏目、删文章之前先查一下站内还有哪些地方链向它们;平时养成习惯,每月跑一次全站链接检查,把新产生的失效地址当月清掉。站点规模不大的话,这个维护量并不大,但换来的是搜索引擎抓取一直顺畅,收录和排名也就少了一类没来由的波动。
版权免责声明: 本站内容部分来源于网络,请自行鉴定真假。如有侵权,违法,恶意广告,虚假欺骗行为等以上问题联系我们删除。
本文地址:https://zydir.com/article/view/122.html