欢迎来到山村网

网站每天被蜘蛛爬N遍但为何收录很少

2019-03-02 01:44:03浏览:807 来源:山村网   
核心摘要:  声明:由于站长提问的问题过于简单或不工整,我这边有做文字上的处理,但原意都不变!  以下内容为第11期问答实录:  问
网站每天被蜘蛛爬N遍但为何收录很少 山村

  声明:由于站长提问的问题过于简单或不工整,我这边有做文字上的处理,但原意都不变!

  以下内容为第11期问答实录:

  问题简写一:网站每天都被蜘蛛爬N遍,收录的网页为何只有一两篇?

  问:黄老师你好,我的企业网站上线有一段时间了,原创文章每天也都在坚持更新,但就是不怎么收录,后来我分析了一下网站日志,发现百度爬虫每天都来爬N遍。我就郁闷了,为什么蜘蛛每天都来爬行,我的内容页收录的这么少呢?是不是进沙盒了?还是内容质量不行?

  答:一般来说新站都会遇到这样的问题,而且很多SEO人员都遇到过,那种焦急的状态我也是很理解的。通常我都会让他们去观察,如果观察一段时间且很长一段时间内都是这样的话,那可能是你的网站内容存在问题。无论蜘蛛抓你千百遍都不怎么收录,这就说明你网站的内容不值得被索引。其实很多权重高的网站被降权了也会出现这样的情况。所以,建议你从内容上做检查。

  问题简写二:网页被robots了,为什么还会被百度收录?

  问:黄忠老师,这个问题困惑我很久了,为什么我网站的网页被robots屏蔽了之后,我从网站日志分析后还会能看到被百度抓取和收录呢?不是说屏蔽了以后就不会被抓取和收录了吗?这些页面都是我们老板千叮万嘱不让展现在百度的,现在都不知道怎么交差了,求解释。

  答:我经常遇到这样的情况,很多人都来问我:“为啥屏蔽了的页面还被抓取?”这里我简单的说下吧,一般有两种情况:

  第一种是:对已经收录的网页使用robots屏蔽,老网页按照robots规则的删除时间会很长,这个时候可能会造成百度没有遵守robots规则。

  第二种情况是:如果你屏蔽的页面或栏目存在大量的外链,那么这个网页或栏目的URL会被百度收录,但内容不会被百度索引,一般这样的多见于首页域名。当然,如果你连URL都不想被收录,可以针对蜘蛛返回404即可。

  问题简写三:B2B网站上下架的产品返回404还是200状态码?

  问:黄老师,我们B2B网站上很多产品都等待下架,还有很多用户自主删除的产品页面,我想返回404错误页面,但是数量太多,怕百度认为我网站上存在大量的死链。如果返回200,怕欺骗搜索引擎,所以,现在我也不知道怎么办才好,想让黄老师给个建议。

  答:这个是黄忠SEO兄弟VIP圈子里的成员提问的问题,我给收录进来了。我简单的说下这个解决方法:建议为产品下降的页面返回404状态码,不要返回200状态码。一般来说,只要正确的返回404是对网站没有任何影响的,还可以减少蜘蛛抓爬给服务器造成的负担。如果死链较多,我们可以让技术设计一个自动生成死链地图的程序,任何删除行为都自动把链接写到指定链接文件里去,然后在百度站长平台提交死链即可。

  另外,商城网站产品下架其实这个是最常用的。

  问题简写四:还没有做好的页面已经解析域名了,是做404还是503?

  问:我们这边的技术经常做一些新页面的建设,每次整的页面在开发的时候就被百度收录了,弄的我很无语的。我想问下是给他们做404还是503?哪个更好一些?

  答:一个建议,尽量不要使用404状态码给为创建好的页面做返回,能用503的建立用503,这样可以让蜘蛛更好的去识别它。其他的没什么建议了。

  问题简写五:现在外链还重要吗?企业网站该怎么做有效性的外链?

  问:黄忠老师,很多都说百度现在不重视网站外链建设了,不知道是不是真的,搞的我们公司的企业网站都没法做外链了,现在网站排名也停滞不前了。另外,在问一个小白的问题:企业网站该怎么做有效性的外链?求指导。

  答:百度搜索引擎已经降低了外链的重视程度,但外链建设还是需要继续做的,只是质量的好坏决定了外链对你网站的重要程度。而企业网站怎么做外链呢?我可以简单的说下,希望对你有帮助:

  ①:友情链接,这个不用多说了,大家都知道。

  ②:选择针对性或相关性的外链平台发原创文章做外链

  我举个例子:

  比如我做的是牛蒡茶,这个属于养生茶,我就可以选择一些优质的B2B平台做外链。

  注意,B2B里面有很多分类,那么我就找养生茶方面的分类。然后,外链内容要原创,而且要先发布在自己的网站上,12小时后在发布到B2B,并带上内页链接。

  当然,如果有养生门户方面的外链资源,也可以去发布外链,比如39健康网,不过这样的一般都是付费的。

  ③:结合自己优化网站的经验,写SEO经验心得文章,投稿A5和Chinaz

  你优化了这么久的网站SEO,多多少少都会积累一些经验心得,那么你就可以结合你这个网站写一些SEO方面的经验心得文章,然后发布在A5或者站长之家。

  比如:食品类型的企业网站如何做好外链建设,可以结合这个去写出你的经验心得文章,以总分总的格式去写,底部带上首页链接即可。

  这样的外链虽然没有针对性,但有相关性。 和食品类型的网站有相关性,百度也比较重视。

  问题简写六:404错误页面访问后直接跳转首页,有哪些弊端?

  问:你好黄老师,我们的企业网站经常删除一些内容页,我们是想把这些删除掉的页面跳转首页,不知道这样做有哪些弊端?

  答:不建议跳转到首页,因为这种操作是对搜索引擎不友好的设置,会让搜索引擎认为网站上有大量与首页内容相同的页面。

  欢迎添加黄忠的个人微信号 343031031 一起交流与互动SEO。

(责任编辑:豆豆)
下一篇:

外链建设都发生了哪些变化

上一篇:

如何利用robots协议优化你的WordPress博客站

  • 信息二维码

    手机看新闻

  • 分享到
打赏
免责声明
• 
本文仅代表作者个人观点,本站未对其内容进行核实,请读者仅做参考,如若文中涉及有违公德、触犯法律的内容,一经发现,立即删除,作者需自行承担相应责任。涉及到版权或其他问题,请及时联系我们 xfptx@outlook.com