首页 > 优化 > 关键词 > 网站结构优化最新资讯 > 正文

建站优化系列教程八:404页面和ROBOT设置

2012-01-16 14:27 · 稿源:fengxiong77.com

据笔者观察,很多的个人站都对404页面和ROBOT文件不是很重视,因为大部分个人站长都觉得这两个是可有可无的,但是笔者觉得这两个文件对优化也是有影响的,特别是404页面,如果网站出现了无效链接,那么可以通过404页面留住用户,使之返回网站继续浏览。而ROBOT文件则是让蜘蛛更好的收录网站的可收录页面,对于网站收录量的高低有非常大的影响。好了,现在回归正文,下面开始讲解这两个文件的设置。

404页面的作用

大部分站长知道的404页面可能是为了引导用户在浏览到某个无效页面时,可以通过404页面提供的链接返回到网站,而且大部分站长认为404页面就这么一个作用而已。其实不然,404页面还有其他的作用。比如当用户长时间浏览网站时,会出现麻木性的点击,当点击到无效链接时就会产生退出的心理,而这时候如果网站没有404页面引导的话,那么用户自然就会关闭网站,很容易就造成用户的流失了。但是通过设置比较新颖的404页面可以让用户缓冲一下紧张的情绪,就像卢哥的404页面设置一个FLASH小游戏一样,当产生了无效链接时,用户可以通过玩玩小游戏来缓冲一下情绪,这样自然就会更容易的重新返回网站继续浏览了。

所以说,404页面不但是为了屏蔽无效的链接,还可以利用404页面缓冲用户的浏览麻木性,这对于激发用户再次浏览网站具有非常大的帮助,如果你不信,可以设置一个比较新颖的404页面,观察一下其跳出率和PV值吧。

404页面的设置方法

对于上文说的404页面的作用,那么站长如何设置有效的404页面呢?主要有几个方法:

1、404界面风格要新颖。界面和风格都比较新颖的404页面可以让用户浏览到无效链接时,也不会对网站失去了兴趣,而且可以使用户不会为网站出现无效链接而对网站产生怀疑。就像站长之家的404页面,就比较独特了。

2、404页面要有停顿时间。这点对用户和搜索引挚都非常重要,不要把404页面停留的时间设置过短,比如1-3秒之间的就对用户和蜘蛛都不友好。最低保持在5秒以上。

3、404页面不要直接返回首页。如果404页面直接跳转到首页的话,那么就会让蜘蛛爬行时,把它当成是一个独立页面收录,这样对后期的优化并不友好。

4、404页面要给用户选择跳转。其实这点是笔者最近才发现的,许多的404页面只留下一个跳转到首页的链接,这样使得用户无法选择自己要返回的页面,自然对用户体验就不是那么友好了,所以,在404页面中,不但要有跳转首页的链接,还要设置返回其他页面的链接,比如返回上一页、返回之前的分类页等,这些都会让用户感觉到网站的人性化。

5、404页面需要屏蔽掉。在ROBOTS文件中,要把404页面的地址屏蔽起来,这样即使是出现以上的情况也不会让搜索引挚爬行到,也不会出现无效链接也被收录了。

ROBOTS文件的作用

百度百科中ROBOTS文件的解释就是告诉蜘蛛程序在服务器上什么文件是可以被查看的。就按笔者的理解,ROBOTS文件就是为了告诉蜘蛛哪些页面可以抓取,哪些页面不可以抓取。现在很多站长说自己明明设置了禁止抓取的页面,但是搜索引挚也一样收录这些页面,开始怀疑ROBOTS文件是不是没作用了。其实不是,设置了还被抓取那说明你的ROBOTS语法错误了,ROBOTS设置不当使得文件根本就不起作用。其实说白了ROBOT文件的作用就是把自己需要被收录的页面提供给蜘蛛爬行,而不想被收录的,那么通过ROBOTS文件进行屏蔽,不让蜘蛛爬行这些页面,这样就不会造成页面被抓取了。所以说,ROBOTS在网站优化中的作用就是让不利于搜索引挚收录的页面实行屏蔽,通过ROBOTS文件引导蜘蛛可以爬行哪些页面和不可爬行哪些页面。

ROBOT文件的设置方法

那么新手在学习网站优化中,怎么才能正确的设置ROBOTS文件呢,使之具有引导蜘蛛爬行自己允许的页面呢?主要有几个设置方法:

1. 整站屏蔽设置方法。如果你的网站不想被全部的搜索引挚收录的话,那么可以这样写:

User-agent: *

Disallow: /

2. 屏蔽某个文件。比如我不让搜索引挚抓取ADMIN这个文件夹,自然需要用ROBOTS文件屏蔽ADMIN这个文件了,写法:

User-agent:*

Disallow:/ADMIN/

3. 禁止某个搜索引挚抓取网站页面。比如禁止谷歌机器人收录网站的任何页面,写法:

User-agent:Googlebot

Disallow:*

4. 允许一个文件中的某个文件夹被抓取,比如允许FLIMS文件夹中的INDEX2.html文件被抓取,那么就应该这样写:

User-Agent:*

Disallow:/FLIMS/

Allow:/FLIMS/INDEX2.html

其他类似的方法也以此类推,新手在设置ROBOTS文件时,可以多点参考百度优化指南中的相关介绍,这样对于网站收录量高低可以更容易掌握,而且也利于自己知道哪些页面被收录,哪些页面自己禁止被收录了。

在设置404页面,站长应该以用户体验为参考对象,如果自己是网站用户的话,当点击到无效链接时,什么样的404对于自己更有吸引力。而ROBOTS文件主要是针对搜索引挚的,所以,只要设置正规,自然就不会影响到网站优化的效果,但是如果设置不当的话,可能会出现网站不被收录的哦,或者自己不想被收录的页面居然收录了,自已想被收录的页面却没有被收录。所以,今天笔者简单分析了404页面和ROBOTS文件的设置方法,希望新手在学习网站优化的过程中,可以设置出适合自己网站的404和ROBOTS。本文就到这里,由丰胸产品(https://www.fengxiong77.com/)独家供稿,转载请注明,谢谢!

  • 相关推荐
  • 大家在看
  • 如何把快死掉的网站变成月入40万+的摇钱树

    ​今天介绍的案例是一个利用百度SEO产品, 2 年时间把快死掉的网站做到月入 40 万+的摇钱树。网站 2018 年建站,只用了 2 年,做到权7,日流量 16 万+。同样的业务逻辑,同样的内容,网站前身SEO流量还是0。这家公司的SEO策略有哪些值得学习的地方呢。一起聊聊

  • 3种创建网站“关于”页面创造性方法,与访客建立“亲密关系”

    ​没有人比你更了解你自己或你的业务。然而,为什么写很多时候网站上“关于”页面是创建网站最困难的部分呢?网站的“关于”页面是让理想客户知道为什么这个产品是最能满足他们需求的最佳场所。

  • 优化Banner广告收入的7种策略

    要使发布商获得最大利润,就需要优化Banner广告。广告的错误放置会降低点击率(CTR),导致收入暴跌,最糟糕的是:并非每个受众都会以同样的方式做出反应。

  • SEO内容优化,为什么需要关注语义相关性!

    ​众所周知,这是一个内容为王的时代,无论是SEO、社交媒体、新媒体等一些列营销人员,每天都会创造大量的原创文章,我们知道人工智能逐渐的渗透到每个领域,自从谷歌 2015 年开启Rankbrain后,它在搜索领域扮演着重要的角色,特别是在创建内容方面,给予我们很大的提示。

  • 华为Mate40Pro和Mate40Pro+的区别 Mate40系列买哪一款好

    华为Mate40系列预计在10月份发布和上市,不少用户期待着这款手机的发布,此前也有爆料消息称Mate40系列会有四款机型,分别是Mate40、Mate40Pro、Mate40Pro+、Mate40保时捷版,那么购买哪一款比较合适呢。

  • ColorOS 11 持续优化手机体验,软硬件一体提升手机续航

    10 月13 日,万众瞩目的 iPhone12 系列发布。但令人惊讶的是,终于支持5G 的 iPhone12 不仅缩减了电池容量,更是依旧只支持最高20W 的充电功率,同时还以环保之名省去了包装里附带的电源适配器。这也意味着如果用户想要达到20W 的充电速度,就得额外花钱购买电源适配器,而苹果原装20W 电源适配器的价格为149 元。与之相对的是,国内厂商更加重视用户体验,为了有效缓解用户续航焦虑而不断发力快充领域。以 OPPO Find X2 Pro 为例?

  • 北京胜学网校:优化服务,提升产品价值

    北京胜学网校隶属于北京胜学科技有限公司, 24 年办学经验,“无问责之心、不教书育人”的教育理念和一以贯之的身体力行,树立了“胜学”在 10 余万学员心目中的金字招牌。 24 年来,胜学教育始终贯彻“开放共赢”的大发展思路、树立“人人皆可成才”的人才理念,不断完善“严谨治学、苛求服务”的产品优化体系。 开放型发展思维 北京胜学网校一直致力于以“开放的思维”办大家需要的网校,欢迎和鼓励所有社会优秀人才、公司同仁?

  • 首选赋能计划:双特色-现实的科学优化和未来的科学规划

    伴随高等教育招生规模的不断扩大,大学生就业问题引起了社会各界的高度关注。尤其在当今世界范围内由疫情引起的经济危机影响下,大学生就业形势变得更加严峻。但在待就业的学生群体中,职校学生却拥有了更大的发展舞台和就业空间。近年来,国家不断重视职校学生发展,同时企业对于具有专业技能和工作素养的学生需求越来越大。积极培养职校学生职业素质教育,对于职校学生未来就业将产生很大的作用。重视学生职业素质的培养是解决学生就业

  • 翼龙贷不断优化风控系统将翼龙贷风险降到最低

    风险控制是金融行业内最常见的名词之一,目前网贷平台的风险控制主要指信用风险评估,也就是在借款业务中。风险控制按照名字来解释就是“指风险管理者采取相应的措施与方法,消灭或减少风险事件发生的可能性,或者减少当风险事件发生时造成的损失”。 对于网贷平台来说,风险控制的关键点就在于借款业务发生前的借款方的信息审核。如果在这个环节把控的非常好的话,那在后续的贷中控制和贷后管理就会相对轻松很多。那么,对于这些?

  • 抖音如何设置账号地区 抖音怎么设置地区

    抖音上的个人信息里,有一栏是地区位置,系统可能会根据你的位置来推送一些周边的短视频内容,有一部分用户想要修改自己的位置信息,需要在哪里可以修改呢,我们来看下具体的修改方法介绍。

  • 深度算法优化 金山云低延迟直播码率再节省12%~17%

    今年以来,疫情让互动课堂、线上会议、连麦等实时互动的场景迅速升温,数千万、数亿人的同时在线本来对网络就是一场巨大的考验,低延迟直播更对算力和网络提出前所未有的挑战。 作为在视频云领域一流的技术服务提供商,金山云不断在低延迟算法上进行探索优化,让码率带宽更加节省。 低延迟深度算法优化 带宽压缩12%~17% 众所周知,低延迟直播需要具备较为苛刻的限制条件:1.带宽受限且面临弱网压力;2.对延迟的要求高;3.视频画面中

  • 蝉大师独家上线:一键知晓iOS14对我的App的优化影响

    iOS14 正式版上线后,许多用户都沉迷于各种屏幕小组件,但对于ASOer来说,更关注的iOS14 对于自身产品的影响。此前蝉大师结合数据分析发现:iOS14 在榜单和热搜数据与iOS13 相比没变化,主要变化集中在建议词与修正词。许多ASOer对此表示困惑,iOS14 新出现的推荐词对自家产品具体会有什么影响?后续该怎么调整优化关键词呢? 基于此,蝉大师在全面支持iOS14 系统关键词数据的基础上,重磅推出了三大贴心功能: 1 增iOS14 关键词诊?

  • 华为mate40什么时候发售上市 华为发布会Mate40pro有哪些亮点

    ​华为mate40什么时候上市?10 月 10 日,华为消费者业务CEO余承东宣布,华为Mate40系列全球线上发布会将在 2020 年 10 月 22 日20: 00 举行。目前有关该系列手机的信息不多,但可以确定的是,华为Mate40 系列将首发麒麟 9000 系列处理器,有望采用5nm制程工艺,带来更为强大的性能表现。

  • 腾讯发布TIM 3.2正式版:稳定性提升 优化使用体验

    TIM是腾讯为团队沟通协作打造的聊天工具,支持云文件、在线文档、邮件收发、日程等办公功能。今天,TIM 3.2正式发布,该版本没有带来新功能,主要是在TIM 3.1的基础上优化了一些体验问题,提升

  • 如果你的网站已经过时了,咋整?

    市场营销的目的无疑就是为了吸引用户的注意力。关注者、朋友、访客、粉丝、点击、喜欢、分享都是吸引关注的量化表达。要想在游戏中立于不败之地,你需要一个有吸引力的网站、一个有用的博客和引人注目的视觉效果。

  • 基于Chromium的浏览器错误地创建了一个神秘的调试文件 附解决办法

    如果你在Windows10上使用基于Chromium的浏览器(Chrome、Edge、Brave等),你应该会注意到一个名为"debug.log"的神秘文件。Windows10下运行这些浏览器时甚至还会有机会在桌面上创建debug.log文件,但技术人员分析后表明,该文件是由Chromium浏览器创建的,并不是微软和第三方浏览器开发方的错。

  • 华为Mate40有什么新功能配置介绍 Mate40Pro官方渲染图曝光

    作为下半年最受关注的国产旗舰之一,华为Mate40 系列产品并没有如前几年一样在九月份与大家见面,而是将推迟到十月份。华为新机的全球发布会将于北京时间10 月22 日20:00 召开。随着时间的推移,关于这款产品的曝光消息也越来越多。日前知名爆料者 @rquandt 曝光了 Mate40 Pro 的官方渲染图。

  • 华为mate40什么时间发布 华为发布会mate40pro即将亮相

    华为mate40 什么时间发布?今年十月除了苹果iPhone12 发布,大家最期待的旗舰机莫过于华为Mate40 系列了。此前,余承东曾承诺,华为Mate40 系列新机将会如期而至,这款万众瞩目的华为麒麟高端绝唱,到底何时才会与大家见面呢?

  • 华为Mate 40 Pro或是本年度最后一款Android旗舰智能机

    随着2020年走入第四个季度,期待已久的华为Mate40/Mate40Pro或成为本年度最后到来的Android旗舰设备。WinFuture早前爆料称,Mate40Pro配备了基于5nm制程的海思麒麟(Kirin)9000八核芯片组,基准测试表明其已超越高通骁龙865。遗憾的是,受美方政策限制,这批海思麒麟90005G芯片组的库存也相对有限。

  • 抖音如何设置账号头像挂件 抖音头像挂件怎么设置

    抖音经常会推出各种有趣的头像挂件,让用户装饰自己的账号,让账号看起来更加个性化、更加有趣,具体要如何设置抖音的头像挂件,操作步骤是什么样的呢,我们来看下抖音头像挂件具体设置方法。

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议
  • 热门标签