首页 > 优化 > 关键词 > 网站SEO最新资讯 > 正文

网站SEO问答11期:网站每天被蜘蛛爬N遍,为何收录很少?

2016-05-11 14:08 · 稿源:黄忠的网站

前言:最近半年,黄忠一直在做企业SEO问题解答活动,主要目的很简单:为了帮助广大企业站长和SEO从业者能够快速的解决问题从而提升自身能力,所以问题解答这块也就一直持续到现在!我相信很多人都得到了我的帮助,同时我也收集了各种各样的优质问题。当然,我会不断的把问题解决后分享给大家!

声明:由于站长提问的问题过于简单或不工整,我这边有做文字上的处理,但原意都不变!

以下内容为第11期问答实录:

问题简写一:网站每天都被蜘蛛爬N遍,收录的网页为何只有一两篇?

问:黄老师你好,我的企业网站上线有一段时间了,原创文章每天也都在坚持更新,但就是不怎么收录,后来我分析了一下网站日志,发现百度爬虫每天都来爬N遍。我就郁闷了,为什么蜘蛛每天都来爬行,我的内容页收录的这么少呢?是不是进沙盒了?还是内容质量不行?

答:一般来说新站都会遇到这样的问题,而且很多SEO人员都遇到过,那种焦急的状态我也是很理解的。通常我都会让他们去观察,如果观察一段时间且很长一段时间内都是这样的话,那可能是你的网站内容存在问题。无论蜘蛛抓你千百遍都不怎么收录,这就说明你网站的内容不值得被索引。其实很多权重高的网站被降权了也会出现这样的情况。所以,建议你从内容上做检查。

问题简写二:网页被robots了,为什么还会被百度收录?

问:黄忠老师,这个问题困惑我很久了,为什么我网站的网页被robots屏蔽了之后,我从网站日志分析后还会能看到被百度抓取和收录呢?不是说屏蔽了以后就不会被抓取和收录了吗?这些页面都是我们老板千叮万嘱不让展现在百度的,现在都不知道怎么交差了,求解释。

答:我经常遇到这样的情况,很多人都来问我:“为啥屏蔽了的页面还被抓取?”这里我简单的说下吧,一般有两种情况:

第一种是:对已经收录的网页使用robots屏蔽,老网页按照robots规则的删除时间会很长,这个时候可能会造成百度没有遵守robots规则。

第二种情况是:如果你屏蔽的页面或栏目存在大量的外链,那么这个网页或栏目的URL会被百度收录,但内容不会被百度索引,一般这样的多见于首页域名。当然,如果你连URL都不想被收录,可以针对蜘蛛返回404即可。

问题简写三:B2B网站上下架的产品返回404还是200状态码?

问:黄老师,我们B2B网站上很多产品都等待下架,还有很多用户自主删除的产品页面,我想返回404错误页面,但是数量太多,怕百度认为我网站上存在大量的死链。如果返回200,怕欺骗搜索引擎,所以,现在我也不知道怎么办才好,想让黄老师给个建议。

答:这个是黄忠SEO兄弟VIP圈子里的成员提问的问题,我给收录进来了。我简单的说下这个解决方法:建议为产品下降的页面返回404状态码,不要返回200状态码。一般来说,只要正确的返回404是对网站没有任何影响的,还可以减少蜘蛛抓爬给服务器造成的负担。如果死链较多,我们可以让技术设计一个自动生成死链地图的程序,任何删除行为都自动把链接写到指定链接文件里去,然后在百度站长平台提交死链即可。

另外,商城网站产品下架其实这个是最常用的。

问题简写四:还没有做好的页面已经解析域名了,是做404还是503?

问:我们这边的技术经常做一些新页面的建设,每次整的页面在开发的时候就被百度收录了,弄的我很无语的。我想问下是给他们做404还是503?哪个更好一些?

答:一个建议,尽量不要使用404状态码给为创建好的页面做返回,能用503的建立用503,这样可以让蜘蛛更好的去识别它。其他的没什么建议了。

问题简写五:现在外链还重要吗?企业网站该怎么做有效性的外链?

问:黄忠老师,很多都说百度现在不重视网站外链建设了,不知道是不是真的,搞的我们公司的企业网站都没法做外链了,现在网站排名也停滞不前了。另外,在问一个小白的问题:企业网站该怎么做有效性的外链?求指导。

答:百度搜索引擎已经降低了外链的重视程度,但外链建设还是需要继续做的,只是质量的好坏决定了外链对你网站的重要程度。而企业网站怎么做外链呢?我可以简单的说下,希望对你有帮助:

①:友情链接,这个不用多说了,大家都知道。

②:选择针对性或相关性的外链平台发原创文章做外链

我举个例子:

比如我做的是牛蒡茶,这个属于养生茶,我就可以选择一些优质的B2B平台做外链。

注意,B2B里面有很多分类,那么我就找养生茶方面的分类。然后,外链内容要原创,而且要先发布在自己的网站上,12小时后在发布到B2B,并带上内页链接。

当然,如果有养生门户方面的外链资源,也可以去发布外链,比如39健康网,不过这样的一般都是付费的。

③:结合自己优化网站的经验,写SEO经验心得文章,投稿A5和Chinaz

你优化了这么久的网站SEO,多多少少都会积累一些经验心得,那么你就可以结合你这个网站写一些SEO方面的经验心得文章,然后发布在A5或者站长之家。

比如:食品类型的企业网站如何做好外链建设,可以结合这个去写出你的经验心得文章,以总分总的格式去写,底部带上首页链接即可。

这样的外链虽然没有针对性,但有相关性。 和食品类型的网站有相关性,百度也比较重视。

问题简写六:404错误页面访问后直接跳转首页,有哪些弊端?

问:你好黄老师,我们的企业网站经常删除一些内容页,我们是想把这些删除掉的页面跳转首页,不知道这样做有哪些弊端?

答:不建议跳转到首页,因为这种操作是对搜索引擎不友好的设置,会让搜索引擎认为网站上有大量与首页内容相同的页面。

欢迎添加黄忠的个人微信号 343031031 一起交流与互动SEO。

  • 相关推荐
  • 大家在看
  • 百度度小店是什么

    在抖音小店与快手小店之后,百度的度小店也来了。据了解,度小店平台成立于 2019 年 ,服务内容针对全面的电商解决方案,并提供建店、交易、结算、订单等全链路能力,充分满足客户所需,实现多维度营销及订单转化。那么度小店怎么样?以下是关于百度度小店的详细介绍。

  • 腾讯跟百度谈入股爱奇艺?百度:不予置评

    6月16日消息,外媒援引知情人士透露的消息称,腾讯已经与拥有56.2%爱奇艺股权的百度就购买爱奇艺股份进行接洽,计划成为爱奇艺的最大股东。对此消息,百度方面回应不予置评。最新财报显示,爱奇艺2020年第一季总营收达76亿元人民币(约合11亿美元),同比增长9%,但运营亏损仍然达到22亿元人民币(约合3.166亿美元)。根据易观千帆的数据显示,2019年9月国内综合视频app排行,日均使用时长上,爱奇艺和腾讯视频分居第一?

  • 百度为什么那么喜欢「卖」公司?

    自 6 月 16 日,路透社报道称腾讯欲取代百度控股爱奇艺后,微博话题#腾讯计划入股爱奇艺#阅读量高达6602. 6 万,讨论达1. 4 万,爱奇艺股价涨幅更是达到40%。如果交易达成,长视频格局将从此变天。

  • 电商,百度的新战役

    百度正在不遗余力的加码移动生态的服务能力。在今年 5 月份的万象大会上,百度集团执行副总裁沈抖明确表示:“服务是移动生态的新方向。”在沈抖说完这句话后的一个多月的时间里,百度完成了对电商平台有赞以及消费品排行榜盖得排行的投资。

  • 度小店赚钱吗?百度度小店挣钱吗

    现在还是做网店创业赚钱的时候吗?遍地都是卖家,怎么才能从中脱颖而出?现在开店平台多了一个新的选择,百度度小店是为所有有开店诉求,具备企业或个体工商户资质的企业、机构、个人提供的直营电商行业解决方案,提供建店、交易、结算、订单等全链路能力,帮助电商客户实现多维度营销及订单转化。那么百度度小店挣钱吗?

  • ​百度回应向腾讯出售爱奇艺股权:爱奇艺是百度重要组成部分

    今日,针对“百度拟向腾讯出售爱奇艺股权”的报道,百度公关总监郭锋回应称,大家别乱猜了。爱奇艺是百度内容生态战略的重要组成部分,百度会一如既往地支持爱奇艺的发展。

  • 百度李震宇:百度无人车业务不会拆分 没有对外融资计划

    在今日下午的Apollo媒体沟通会上,百度集团副总裁、智能驾驶事业群组总经理李震宇表示,百度无人车不会分拆,现在也没有对外融资的计划。

  • 百度推出“高考放心搜计划”:清理2. 6万个恶意网站

    6 月 10 日,百度推出「高考放心搜计划」,为高三考生及家长提供信息和智能搜索服务:包括上千场高考直播、高考搜索大数据、闪电估分以及智能志愿助手等。考生和家长在百度App搜索「高考」、「高考直播」等关键词即可获取上述服务。

  • 排名超百度,这个搜索APP什么来头?

    搜索引擎行业风云变幻,各路人马登场亮相。今年 3 月,华为针对海外市场的搜索引擎HUAWEI Search开始内测。与此同时,经过半年多的测试,脱胎于网页版的头条搜索也上线了自己的APP。

  • 腾讯老干妈纠纷 百度接锅否认三连:与度无关

    7月1日消息,这两天,关于腾讯和老干妈公司之间因为广告费而引发的问题吸引了诸多网友关注。就在今天贵阳警方发布通报,有3人伪造老干妈印章与腾讯签订合同,已被刑拘。“3人伪造老干妈印章与腾讯签合同”一度成为微博上的热门话题。今天下午,网络上突然流传出一则“ 腾讯状告老干妈拖欠广告费提及某搜索引擎”的截图。对此,百度搜索紧急发布了“否认三连”表示此事与百度无关:“手里的瓜突然不香了……有一说一,?

  • 网页排序哪5个特征,百度颇为喜欢?

    常常用于表达一个人对于另外一个人的情有独钟,而在搜索引擎的领域里,很多SEO人员,常常试图去找寻一个“唯一的真理”那就是搜索排序中,到底哪个排序特征对于网页来讲,是最为重要的一个因素,而“我只喜欢你”,对于SEO而言,能不能真的把SEO做好。

  • 百度打脸哈佛新冠肺炎论文:不严谨

    6月12日消息,今年6月8日美国哈佛医学院一研究团队在哈佛 DASH 学术平台发表一篇未经同行评议的论文称,通过分析武汉医院停车场卫星图片、百度搜索趋势数据,发现早在2019年8月,武汉就开始出现新冠肺炎流行的迹象。因为该论文使用百度上“咳嗽”与“腹泻”关键词检索数量的变化来推导结论,对此,百度方面进行回应,表示,哈佛大学医学院论文这种研究方式是“非常牵强和不严谨的”,并呼吁相关研究更加科学严谨地引用

  • 百度移动生态事业群已经完成搭建直播中台

    近日百度移动生态事业群已经完成搭建直播中台,组建独立团队,负责人为古丰(真名为陈罗金),向百度副总裁、百度App总经理平晓黎汇报。公开资料显示,陈罗金 2010 年从网易加入YY欢聚时代,并发起和孵化了YY的游戏直播团队

  • 爱采购是什么?百度爱采购平台介绍

    百度爱采购是百度旗下的B2B垂直搜索引擎,于 2018 年 10 月 19 日上线。百度爱采购旨在帮助用户一站直达全网商品信息,触达海量优质商家。商家可通过百度爱采购与百度搜索无缝对接,满足用户对于采购信息检索的需求,同时为入驻企业找到精准买家。百度爱采购用AI帮助中小企业更好地解决采购批发渠道、货源问题。以下是百度爱采购平台的详细介绍。

  • 直播带货段位升级:从“OMG,买它”到百度“慢”直播

    刚刚结束的618,最大的亮点当属直播带货。抖音、快手等短视频平台拥有头部主播,发挥了“人”的核心优势;淘宝、京东等电商平台展现了“货”的优势;而百度作为知识与信息的平台,像一路奇兵,发挥了“场”的优势。

  • 百度知识直播带货,这条弯路能走通吗?

    直播带货都如火如荼了,百度才匆匆入场,显得有些后知后觉。但百度的确带来不一样的直播玩法。如果说老罗亲自直播带货,是作为商人的执著;那么李彦宏布局百度「知识直播带货」,就是文人企业家的变通。

  • 路透:腾讯计划入股爱奇艺 已经与百度接触

    路透社援引两名知情人士消息称,腾讯控股打算成为它的视频流媒体竞争对手爱奇艺的最大股东,以降低成本。其中一名知情人士表示,腾讯已经与爱奇艺56.2%股份持有者百度进行接触,希望购买规模尚未确定的股份。不过目前还不清楚腾讯是否已经与爱奇艺接触。该名知情人士称,采取这样的策略将可以提高生产和购买内容时的议价能力,同时降低营销成本。知情人士也表示,该计划尚处于早期阶段,随时可能

  • 百度推出“高考放心搜计划” 彻底封杀“野鸡大学”

    6月10日消息,在高考即将到来之际,百度今天宣布推出“高考放心搜计划”。为考生和家长,提供权威信息和智能搜索服务。具体来看,服务包括上千场高考直播、高考搜索大数据、闪电估分

  • 百度并购云游戏厂商“红手指”

    据天眼查数据显示, 6 月 2 日,湖南微算互联信息技术有限公司发生多项工商变更,其中多位股东退出,仅剩股东为北京百度网讯科技有限公

  • 百度口碑99%好评的微投票到底有什么亮点功能

    微投票平台已为全国数万家政企机构成功托管过微信投票活动,并且在口碑上取得了一致好评,那么,微投票究竟有哪些功能吸引了用户呢?一、支持视频投票评选活动短视频流行的当下,视频也逐渐成为选手展示的重要方式之一,但第三方投票评选平台大都不支持或需要收费。而在微投票这个平台上,是完全免费开放使用的。二、支持选手在线报名关于选手自己报名参加活动的事情不在少数,之前有很多人都会在网上请教,“哪种微信第三方报名投

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议

热文

  • 3 天
  • 7天