3、利用一些压缩软件或者工具对图片进行压缩，在保持原图不变的情况下压缩，目的是减少占用我们的空间，提高打开速度，这些都是一环扣一环的，推荐一款我一直在用的在线压缩工具，免费无广告，并且支持多张压缩http://www

对于SEO人员，经常会使用百度官方工具，审查站点，查看网站各项指标是否符合预期，其中抓取诊断是站长经常使用的一款工具，很多站长表示，在使用网站抓取诊断的时候，经常出现诊断失败的提示，那么到底是哪里出了问题。

百度向来违反robots协议任意抓取网页内容，在seo业内已不是什么新鲜事儿，不过好像国内的搜索引擎基本都不遵循robots协议，还有那个什么鬼的国搜也是。会长举微信公众号文章的例子说明一下。该篇文章从标题到全部的内容被百度爬取并收录，另有网页快照为证。

空间服务器一旦蜘蛛进行抓取的时候发现打不开，常而已久，蜘蛛会反馈百度数据库一个指定：这个域名没人管理、并且处于关站的状态，所有搜索引擎蜘蛛就慢慢失去抓取网站的兴趣，从而导致网站收录少。当然蜘蛛不来抓取还有一种情况就是：搜索引擎偶尔也有抽风的时候，但是一般这种情况时间并不长，而且影响没有上面两个这么严重，如果长时间不收录内容的话，就要以上的几点原因以及解决方法一一排除。

而且收录好的网站蜘蛛每天抓取的频次也是很高的，这样友情链接就是一个蜘蛛去你的网站的入口。可是现在要想效果好，小编推荐你可以在一些大型网站上手动发外链，但是现在能让你挂外链并引流的网站已经很少了，这个就需要大家去找了。

我想大部分人肯定都回去快的那一家吧，蜘蛛也是一样的，如果网站的服务器太慢，一个网站1分钟甚至更久才能加载出来，那么蜘蛛肯定是对于网站的印象不好，抓取次数也会慢慢减少的。一些了解搜索引擎抓取原理的人应该知道，蜘蛛抓取网站之前都会访问网站根目录下的robots

1.网站的服务器或者空间存在宕机 网站的服务器或者空间宕机，那么百度蜘蛛就无法访问网站，如果网站长期这样，那么就会出现百度蜘蛛不来的情况，因此遇到蜘蛛不来首先要检查网站服务器和空间是否出问题。3.内容被判定为低质量 如果网站存在大量的采集内筒，这已经严重的违反了百度原创的保护机制，因此被发现的情况会出现严峻的甚至会被百度删去索引，直接消失在搜索引擎。

1.网站的服务器或者空间存在宕机 网站的服务器或者空间宕机，那么百度蜘蛛就无法访问网站，如果网站长期这样，那么就会出现百度蜘蛛不来的情况，因此遇到蜘蛛不来首先要检查网站服务器和空间是否出问题。3.内容被判定为低质量 如果网站存在大量的采集内筒，这已经严重的违反了百度原创的保护机制，因此被发现的情况会出现严峻的甚至会被百度删去索引，直接消失在搜索引擎。

网站代码，服务器设备和宽带等因素也会影响网站的爬网。如果服务器设备太差，带宽将使爬虫难以抓取，严重影响搜索引擎对于网站的评级。例如一个有5000流量和网站和一个有50W流量的网站本身的体量不同，那么搜索引擎抓取的频次也是不同的。

网站的响应速度网站的相应速度是搜索引擎抓取网站的关键。如果网站的代码太差，导致网站内容一团糟，那么蜘蛛是不会有时间去耐心的抓取内容的。而服务器的带宽也影响着网站的加载速度。而服务器的带宽也影响着网站的加载速度。

到各大外链平台发布自己的高质量外链，留下链接引导蜘蛛进入你的网站。三、高质量的内容就算一个网站布局再好，网站存在大量死链接，那你网站也是发挥不了用处。过多的死链接，增大网站服务器的负担，所以我们要经常检查网站日志是否出现404错误页面，让蜘蛛在自己网站上畅行无阻。

蜘蛛也是一样，如果网站的服务器不稳定或者速度太慢，也是会不抓取的。如果网站的内容在短时间内大量采集或者一直都是采集的内容，大概率会被搜索引擎认定为垃圾站点或者网站被入侵，这样是很难有蜘蛛来抓取的。以上就是网站优化中蜘蛛不抓取的原因了，希望这篇文章帮助到了您。