网站每天被蜘蛛爬N遍，为何收录很少

　　问题简写一：网站每天都被蜘蛛爬N遍，收录的网页为何只有一两篇?

　　问：唐朝网络你好，我的企业网站上线有一段时间了，原创文章每天也都在坚持更新，但就是不怎么收录，后来我分析了一下网站日志，发现百度爬虫每天都来爬N遍。我就郁闷了，为什么蜘蛛每天都来爬行，我的内容页收录的这么少呢?是不是进沙盒了?还是内容质量不行?

　　答：一般来说新站都会遇到这样的问题，而且很多SEO人员都遇到过，那种焦急的状态我也是很理解的。通常我都会让他们去观察，如果观察一段时间且很长一段时间内都是这样的话，那可能是你的网站内容存在问题。无论蜘蛛抓你千百遍都不怎么收录，这就说明你网站的内容不值得被索引。其实很多权重高的网站被降权了也会出现这样的情况。所以，建议你从内容上做检查。

　　问题简写二：网页被robots了，为什么还会被百度收录?

　　问：唐朝网络，这个问题困惑我很久了，为什么我网站的网页被robots屏蔽了之后，我从网站日志分析后还会能看到被百度抓取和收录呢?不是说屏蔽了以后就不会被抓取和收录了吗?这些页面都是我们老板千叮万嘱不让展现在百度的，现在都不知道怎么交差了，求解释。

　　答：我经常遇到这样的情况，很多人都来问我：“为啥屏蔽了的页面还被抓取?”这里我简单的说下吧，一般有两种情况：

　　第一种是：对已经收录的网页使用robots屏蔽，老网页按照robots规则的删除时间会很长，这个时候可能会造成百度没有遵守robots规则。

　　第二种情况是：如果你屏蔽的页面或栏目存在大量的外链，那么这个网页或栏目的URL会被百度收录，但内容不会被百度索引，一般这样的多见于首页域名。当然，如果你连URL都不想被收录，可以针对蜘蛛返回404即可。

　　问题简写三：B2B网站上下架的产品返回404还是200状态码?

　　另外，商城网站产品下架其实这个是最常用的。

　　问题简写四：还没有做好的页面已经解析域名了，是做404还是503?

　　问：我们这边的技术经常做一些新页面的建设，每次整的页面在开发的时候就被百度收录了，弄的我很无语的。我想问下是给他们做404还是503?哪个更好一些?

　　答：一个建议，尽量不要使用404状态码给为创建好的页面做返回，能用503的建立用503，这样可以让蜘蛛更好的去识别它。其他的没什么建议了。

　　问题简写五：现在外链还重要吗?企业网站该怎么做有效性的外链?

　　问：唐朝网络，很多都说百度现在不重视网站外链建设了，不知道是不是真的，搞的我们公司的企业网站都没法做外链了，现在网站排名也停滞不前了。另外，在问一个小白的问题：企业网站该怎么做有效性的外链?求指导。

　　答：百度搜索引擎已经降低了外链的重视程度，但外链建设还是需要继续做的，只是质量的好坏决定了外链对你网站的重要程度。而企业网站怎么做外链呢?我可以简单的说下，希望对你有帮助：

　　①：友情链接，这个不用多说了，大家都知道。

　　②：选择针对性或相关性的外链平台发原创文章做外链

　　我举个例子：

　　比如我做的是牛蒡茶，这个属于养生茶，我就可以选择一些优质的B2B平台做外链。

　　注意，B2B里面有很多分类，那么我就找养生茶方面的分类。然后，外链内容要原创，而且要先发布在自己的网站上，12小时后在发布到B2B，并带上内页链接。

　　当然，如果有养生门户方面的外链资源，也可以去发布外链，比如39健康网，不过这样的一般都是付费的。

　　③：结合自己优化网站的经验，写SEO经验心得文章，投稿A5和Chinaz

　　你优化了这么久的网站SEO，多多少少都会积累一些经验心得，那么你就可以结合你这个网站写一些SEO方面的经验心得文章，然后发布在A5或者站长之家。

　　比如：食品类型的企业网站如何做好外链建设，可以结合这个去写出你的经验心得文章，以总分总的格式去写，底部带上首页链接即可。

　　这样的外链虽然没有针对性，但有相关性。 和食品类型的网站有相关性，百度也比较重视。

　　问题简写六：404错误页面访问后直接跳转首页，有哪些弊端?

　　问：你好唐朝网络，我们的企业网站经常删除一些内容页，我们是想把这些删除掉的页面跳转首页，不知道这样做有哪些弊端?

　　答：不建议跳转到首页，因为这种操作是对搜索引擎不友好的设置，会让搜索引擎认为网站上有大量与首页内容相同的页面