分析网站蜘蛛抓取与流量下降的原因与解决方法

在网站日常运营的过程中，我们偶尔会遇到如下问题：

①网站流量持续下降

②网站抓取频率同时下降

③网站索引量保持不变

面对这种情况，从SEO统计数据中，我们经常会发现关键词排名成断崖式下跌，从而造成被降权的现象，一时之间，让SEO人员无所适从。

那么，网站流量与抓取同时下降，我们该如何审查？

1、服务器更换  

在进行服务器更换的时候，如果处理不当，还是非常容易造成百度爬虫抓取不稳定的情况，比如：

①网站稳定性

在更换服务器后，你的服务器线路与IP可能会发生改变，这个时候，你需要在百度后台查看，百度蜘蛛访问是否出频频出现“链接超时”的情况。

如果在不同时间节点，大量出现这个问题，那么一定会影响抓取量。

②网站URL改变

由于更换服务器，对于一些伪静态的网站而言，它经常需要调整伪静态规则，在这个过程中，如果你的规则处理不当，造成动态URL与伪静态URL并存。

那么，很容易造成，大量重复URL出现，你可以简单通过site域名查看。

如果出现这个问题，一是修正相关规则，二是利用301重定向。

③防护软件误伤

有很多站长会在服务器开启第三方安全防护软件，这些软件大部分有一个自动屏蔽IP的功能，如果在某个IP段大量出现攻击行为，甚至会自动屏蔽IP段。

但有的时候，它也很有可能出现“误伤”比如：错误的屏蔽了百度蜘蛛IP段。

④服务器安全

毫无疑问，如果网站被黑，它经常是导致流量与抓取直线下降的主要原因，你需要审查是否被恶意篡改代码，是否有选择性的弹窗(根据IP地区、区别用户与蜘蛛等)

2、网站优化策略

如果你近期的优化策略相对比较激进或被动，都会产生上述问题，比如：

①被刷点击

这是一个非常让人无语的行为，但百度也经常会错误的认为你是在尝试作弊，而造成误伤。

②短期大量外链

对于外链优化而言，快速建立大量外链，有的时候其实并没有太大问题，问题在于，如果你所建立的低质量外链，比如：新闻站群外链，刚好有一部分域名，是在百度黑名单中，那么你的站点可能会短期快速被牵连。

而如果你选择的是新站群域名，那么可能还好一点。

③关键词堆积

近百度上线《百度搜索网页标题规范》你是否认真查看，有大量站点因为标题堆积关键词，以及错误使用标点符号，被修改标题，从而造成页面排名大量丢失。