首页 > 优化 > 关键词 > SEO最新资讯 > 正文

网站日志分析能为seoer带来什么?

2017-09-14 14:20 · 稿源:谢海瑶的网站

我们做SEO优化要经常分析网站日志,网站日志的分析和诊断就像给网站看病一样,我们通过网站日志的分析,可以更加清楚的知道网站的健康状况,可以利于这些数据让我们更好的做网站SEO优化,今天海瑶SEO发包技术小编和大家分享下网站日志分析和诊断,如果有什么不对的地方,可留言提问大家一起探讨交流!

网站日志又称蜘蛛日志,它是成千上万个“蜘蛛”小爬虫程序每天爬行数千万个网站,这个小爬虫程序就是“蜘蛛”,它在网站爬行后留下的轨迹或痕迹就是“日志”。

常见的蜘蛛名称:

Baiduspider;Baiduspider-Image;Googlebot;Googlebot-Image;360Spider;sogou spider。

一、网站日志的重要作用?

1、通过网站日志可以了解蜘蛛对网站的基本爬取情况,可以知道蜘蛛的爬取轨迹和爬取量,通过我们的网站日志,外链的多和少和网站蜘蛛的爬取量是有直接影响的,我们所说的链接诱饵就是如果你做了一个外链,蜘蛛在爬取这个外链页面并把页面放出来时,蜘蛛可以通过你留的这个链接来爬取你的网站,而网站日志正是会记录下蜘蛛的这次爬取行动。

2、网站的更新频率也和网站日志中蜘蛛抓取的频率有关,一般来说更新频率越高,蜘蛛的抓取频率越高,而我们网站的更新不仅仅只是新内容的添加同时还有我们的微调操作。

3、我们可以根据网站日志的反应情况,对我们的空间的某些事情和问题提前进行预警,因为服务器如果出问题的话在网站日志中会第一时间反映出来,要知道服务器的稳定速度和打开速度两者都会直接影响我们的网站。

4、通过网站日志我们可以知道网站的那些页面是很受蜘蛛欢迎的,而哪些页面是蜘蛛连碰都不去碰的,同时我们还能发现有一些蜘蛛由于是过度爬取对我们的服务器资源损耗是很大的,我们要进行屏蔽工作。

二、如何下载日志及日志设置注意事项?

1、首先我们的空间要支持网站日志下载,这一点是很重要的,在我们购买空间之前必须要先问好支不支持网站日志下载,因为有的服务商是不提供这项服务的,如果支持的话空间后台一般都有日志WebLog日志下载这个功能把它下载到根目录在用FTP传到本地就可以,服务器的话可以设置将日志文件下载到指定路径。

2、这里有个很重要的问题,网站日志强烈建议设置成每小时生成一次,小型的企业站和页面内容较少的网站可以设置成一天,它默认是一天,如果内容多或者大型站设置成一天生成一次,那么一天只生成一个文件,这个文件会相当的大,我们有时电脑打开是会造成死机,设置的话找空间商协调设置即可。

三、网站日志的分析。

1、日志的后缀名是log的我们用记事本打开,选择格式里的自动换行这样看起来方便,同时用搜索功能搜索BaiduSpider和Googlebot这两个蜘蛛。

例如:

百度蜘蛛 2012-03-13 00:47:10 W3SVC177 116.255.169.37 GET / – 80 – 220.181.51.144 Baiduspider-favo+(+ baidu /search/spider ) 200 0 0 15256 197 265

谷歌机器人 2012-03-13 08:18:48 W3SVC177 116.255.169.37 GET /robots.txt – 80 – 222.186.24.26 Googlebot/2.1+(+ google /bot ) 200 0 0 985 200 31

我们分段来解释

2012-03-13 00:47:10 蜘蛛爬取的日期和时间点;W3SVC177 这个是机器码这个是惟一的 我们不去管它;116.255.169.37 这个IP地址是服务器的IP地址;GET 代表事件,GET后面就是蜘蛛爬取的网站页面,斜杠就代表首页,80 是端口的意思,220.181.51.144 这个IP则是蜘蛛的IP,这里海瑶SEO快排发包技术小编告诉大家一个鉴别真假百度蜘蛛的方法,我们电脑点击开始运行输入cmd打开命令提示符,输入nslookup空格加蜘蛛IP点击回车,一般真百度蜘蛛都有自己的服务器IP而假蜘蛛则没有。

如果网站中出现了大量的假蜘蛛则说明有人冒充百度蜘蛛来采集你的内容,你就需要注意了,如果太猖獗那会很占用你的服务器资源,我们需要屏蔽他们的IP.

200 0 0这里是状态码 状态码的意思可以在百度里搜索下;197 265最后两个数字则代表着访问和下载的数据字节数。

2、我们分析的时候先看看状态码 200代表下载成功,304代表页面未修改,500代表服务器超时,这些是一般的其他代码可以百度一下,对于不同的问题我们要处理。

3、我们要看蜘蛛经常爬取哪些页面,我们要记录下来,分析他们为什么会经常被蜘蛛爬取,从而分析出蜘蛛所喜欢内容。

4、有时候我们的路径不统一出现带斜杠和不带斜杠的问题,蜘蛛会自动识别为301跳转到带斜杠的页面,这里我们就发现了搜索引擎是可以判断我们的目录的,所以我们要对我们的目录进行统一。

5、我们分析日志分析时间长了,我们能够看出蜘蛛的抓取规律,同一目录下面的单个文件的抓取频率间隔和不同目录的抓取频率间隔都可以看出来,这些抓取频率间隔时间是蜘蛛根据网站权重和网站更新频率来自动确定的。

6、蜘蛛对于我们的页面的抓取是分等级的,是根据权重依次递减的,一般顺序为首页、目录页、内页。

7、不同IP的蜘蛛他们的抓取频率也是不相同的

四、那么通过网站日志我们能知道什么?

1、我们发的外链是否起到效果?

2、我们买的空间是否能够稳定?

3、蜘蛛对我们的那些页面比较喜欢而对哪些不喜欢?

4、蜘蛛什么时候抓取我们的网站频繁,我们需要什么时候更新内容?

总结:

所以不管是新站还是老网站,不管你做百度还是Google我们都能通过网站日志分析出来搜索引擎蜘蛛抓取的情况;如果网站长时间收录有问题,那么我们也可以对比网站日志中的搜索引擎蜘蛛行为,来了解网站是哪方面出了问题;如果网站被封,或者被K,我们都可以通过观察网站日志的情况来了解原因出在什么地方。我们要看的网站日志的分析和诊断就像给网站看病一样,我们通过网站日志的分析,可以简单明了的就知道网站的健康状况,可以利于我们更好的做网站优化,所以对于真正的SEO高手而言,分析蜘蛛日志是最直观,最有效的额。

作者微信公众号“海瑶SEO”分享更多SEO优化知识

原文:http://blog.sina.com.cn/s/blog_1709d70020102xi80.html

  • 相关推荐
  • 大家在看
  • 这个网站靠帮人们分析怎么在网上赚钱,月入近3万

    不少想要搞副业的人,曾经花费大量时间和精力尝试在线赚钱,但最后才发现自己白折腾了。eBiz Facts 是一个小团队,该平台花费大量时间研究和审查各种在线赚钱方法是否靠谱,然后给用户一些建议,让他们避免被骗,以及浪费时间、精力和金钱在一些容易“踩坑”在线业务,并做出更明智的决策。

  • “寰宇日志”推广价格预估,靠谱的自媒体推广平台

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。寰宇日志是当前百家号中的原创号头部账号,目前账号百家号权重为5,综合排名位列508名,教育分类排名位列30名,领先了100.0%的百家号。 寰宇日志百家号概况 寰宇日志的简介为宇哥带你看世界,世界奇景尽收眼底!,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过1874篇的游戏内容,最

  • 《DOTA2》6月30日更新日志汇总 勇士礼包促销活动延长

    DOTA2在6月30日这天有一个114.4MB的更新内容,很多玩家还不清楚今天的更新日志有什么,下面就来为大家分享一下DOTA2的更新维护公告。

  • 《DOTA2》6月5日更新维护公告 6.5更新日志汇总

    DOTA2的官方微博宣布在6月5日这天进行了更新维护,其中勇士令状预测和轮回机制更改,除此之外还有一些内容的更新,下面就来一起看看吧!

  • SEO优化,4个独辟蹊径的策略!

    有的时候SEO工作就是一个数字游戏,每天看着数据的增长,不断的调整相关性的策略,但我们非常清楚,有的时候SEO优化会面临各种调整,特别是同行业之间的竞争。

  • 炉石传说6月19日17.4.1补丁更新日志汇总 17.4.1更新维护公告

    炉石传说6月19日就要更新17.4.1的更新补丁了,很多玩家还不清楚本次的更新内容是什么,下面就来为大家分享一下炉石传说6月19日17.4.1补丁更新日志汇总。

  • MIEX 米汇分析师:莱特币,恒星币,波场币-每日分析

    MIEX 米汇研究部:从今天开始看涨,专业将需要突破重心,但是,要发挥抵抗力水平。 莱特币 莱特币周日下跌1.38%。 从周六开始部分逆转了1.80%的涨幅,莱特币一周下跌2.27%至42.96美元。 当天看涨,莱特币上涨至盘中高点43.82美元,随后触及反转。 低于第一个主要阻力位44.20美元,莱特币跌至盘中低点42.90美元。 为了避开第一个主要支撑位42.56美元,莱特币短暂重新回到43美元的水平,然后回落。 在撰写本文时,莱特币上涨0.30%至

  • 绝地求生6月24日更新日志汇总 6.24吃鸡更新维护公告

    绝地求生的官方PUBG_steam在6月23日的下午发布公告,将会在6月24日的早上10点开始进行正式服的不停机维护公告,此次的更新维护内容是修复一些bug,下面就来为大家分享一下此次的绝地求生更新维护公告。

  • 《DOTA2》6月29日更新日志汇总 7.27游戏性更新维护公告

    DOTA2期待已久的游戏更新来了,本次主要是综合性和物品更新:《DOTA2》6月29日更新日志:7.27游戏性更新,下面就一起来看看吧!

  • 渠成的SEO智能营销为用户带来了什么

    渠成作为Netconcepts的创始人,逐步带领公司成为全球领先的互联网营销企业,究竟渠成是靠什么在十几年的时间里,将Netconcepts带向世界前沿的?答案是——SEO。渠成:SEO是核心Netconcepts发展之初,就是以SEO(搜索引擎优化)为核心优势。在渠成的带领下,发展至今,Netconcepts已经成为一家集搜索引擎优化、搜索引擎广告、社会化媒体营销、在线名誉管理、转化率优化服务、移动互联网营销、整合网络营销推广和教育培训为一体的综合?

  • 《骑马与砍杀2》6月4日e1.4.1更新维护公告 e1.4.1更新日志汇总

    骑马与砍杀2霸主在6月4日这天进行了一次e1.4.1版本的更新维护,此次的更新维护主要是发布了一些热修补丁,下面就来为大家分享一下《骑马与砍杀2》6月4日e1.4.1更新维护公告。

  • 一嗨租车好还是神州好,竞争分析得出结果

    如今,国内的租车公司如同雨后春笋般冒了出来,而其中的领军人物有一嗨租车、神州租车,今天我们通过竞争来看一看一嗨租车好还是神州好。首先,汽车租赁行业有定位人群的不同,而一嗨租车和神州租车的定位人群是有租车需要的所有人群,这一点来看两家企业的服务范围还是比较广泛的,服务的对象也不约而同。而我们从市场分析来看,两家企业规模庞大,服务于全国市场,皆为租车行业的领军人物、业内代表。而两家企业的车辆来源主要都

  • 装备制造业重难点分析

    装备制造业是国之重器,是国民经济的支柱产业之一,目前,我国装备制造业“大而不强”矛盾依然突出,自主创新能力、核心制造能力和盈利能力整体偏弱,部分核心关键部件仍受制于人,而装备制造业复杂的营销体系及服务体系管理也是阻碍装备制造业发展的瓶颈。 制造业主要的管理重点及难点体现在以下方面: 1.客户信息严重分散,无法形成公司资源:客户信息散落在各个业务员或部门中,业务或人员变动易造成客户资源流失,企业决策人

  • 八维教育实力怎么样?这篇来分析

    家长最关心的是什么?当然是孩子的未来发展。孩子最关心的也莫过于如何才能拥有自己想要的未来。好学校决定好未来!八维教育成立于1996年,是一家集产业、教育、研究及人力资源服务于一体的综合性企业集团公司。本文来为大家分析八维教育的实力怎么样?八维教育的实力怎么样看八维教育所设立的专业八维教育开设的十五大专业,包括:开发类:软件工程专业、全栈开发专业、云计算专业、网站工程专业、网络工程专业、大数据专业、人工

  • 时趣入选爱分析ifenxi《爱分析·中国营销数字化行业趋势报告》

    近日,国内知名的产业数字化研究与咨询机构爱分析发布了《中国营销数字化行业趋势报告》。报告解读了全渠道驱动营销变革的发展趋势,以及品牌商面临的数据割裂、投入产出比要求变化的新挑战。报告结合数字化实践案例,为品牌商的营销全流程提供应对策略建议,同时展望了全渠道的未来。 其中,时趣以深度整合“创造力人才”+“AI技术”的新型品牌营销服务,作为典型案例,入选本次报告。 进入 20 年代,移动互联网流量红利衰竭,消

  • 信息流优化策略与SEO搜索排名,有关联吗?

    最近,在和SEO你问我答群里小伙伴,私下交流的时候,总是在说一些流量获取的问题,而最为常讨论的情况就是SEO流量与信息流平台的流量。

  • “地摊经济”如何做搜索需求分析?

    如果你是一名SEO人员,经常我们需要做的第一件事就是做关键词挖掘与分析,特别是当我们试图去做热点新闻事件排名的时候。

  • VIPKID英语有哪些优势?以下四点来分析

    近年来,线上教育的概念越来越普及,VIPKID英语作为一个专业的线上英语教育平台,成为了很多家长的首选。那么VIPKID英语有哪些优势呢?1、VIPKID英语的师资力量强。外教全部来自北美,人数超过70000名,学历均为本科及以上,辅导经验丰富。VIPKID英语的北美教师采用全英文教学,鼓励孩子主动说英语,这样孩子的口语将会更加流利。VIPKID英语的师资力量强2、VIPKID英语采用“因材施教”的教育理念和独具特色的“翻转课堂”模式。平台会根据孩

  • 疫情之下,AI智能分析迎来新机遇

    把年度目标定为“活下去”的企业越来越多了,危机感在疫情中逐渐蔓延。一场疫情改变了人们对病毒的认知,也更凸显了商业智能(Business Intelligence)在企业决策中的作用,而国家积极推进的新基建政策建设也加速了产业迈进数字化、智能化的经济变革。疫情中脆弱的商业决策链“我现在最担心的事情,就是今年我们可能接不到订单了。”某知名制造业企业的管理者向记者如是表达他的担忧,近期他已经能明显感觉到,来自海外的订单锐减。?

  • 荣耀30怎么样?理性全面分析来谈一谈

    今年4月,荣耀30系列在人们眼前亮相。随后,荣耀30系列凭借着超高颜值,诚意满满的配置,很快便坐稳5G旗舰手机位置。在这个618荣耀30系列的优惠可谓力度空前,电商平台补贴后仅需2699元起,购机最高可享24期免息。如此合适的优惠活动令很多人心动,也有不少人想更细致的了解这款产品,那么下面我们来理性分析这款荣耀30怎么样。首先来说外观,这次荣耀30在外观上变化不小。它首次采用超大logo设计,背部则采用玻璃材质机身,主打光

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议

热文

  • 3 天
  • 7天