申永祥学习室

小议SEO的数据分析,如何改善网站收录

SEO > 网站优化 > SEO分析 > 申永祥 发布于 2017年05月30日 | 阅读(131)

距离上一篇SEO的数据分析已经过了好久了,最近觉得应该写一些实际点的内容看看SEO到底怎么做。 先明确一些基本点,一个网页被收录与否,有两个因素

 

  1. 是否被爬虫爬过
  2. 页面质量是否过关

 

上一篇文章已经提过了收录率这么一个指标,很多网站都懒得去做这个指标,“我看看site的数据不就行了!”,事实上没有这个指标,很多工作就无从下手。从数据中找出问题,利用数据指导解决方案,分析数据验证工作成果。 最近看了《深入浅出数据分析》这个本,觉得不错,把数据分析的方法讲得很生动,建议有兴趣的从事数据分析的同学可以买本看看。 任何数据分析由,目标->分析->评估->决策,四个环节组成。

 

目标:我们想看一下网站的收录情况如何,在SEO方面是否还有提高的机会。

 

分析:收录情况什么算好什么算坏,是不是用一些指标来衡量?网站的收录情况是不是过于笼统,是不是应该细分下各个页面的收录情况?

 

评估:于是我们需要下面一些数据

 

 

  • 网站的页面层级关系

小议SEO的数据分析,如何改善网站收录 图1

 

 

  • 各个层级页面带来的SEO流量
  • 各个层级页面的收录情况如何

 

小议SEO的数据分析,如何改善网站收录 图2

SEO流量的占比可以从Google Analytics中过滤出来。

页面数量可以从数据库获得,或者通过火车头or自制小脚本抓取统计。

收录率可以将获取的页面通过工具进行搜索,火车头也可以。

 

问题立马凸显!

 

1+2级目录页带来了大量的流量,收录率不是很好,优化收录的流量提升突破口在此!

小议SEO的数据分析,如何改善网站收录 图3

产品页面数量很多,收录也不是很理想,但是带来的流量有限,除了收录问题,还有页面内容的问题,本文中先不管它了。

 

决策:我们的结论是立刻展开行动对目录页面进行收录的优化。

 

看到这边,似乎刚开始的目标:“通过优化收录提升流量”

演变成了新的目标:“如何提高目录页面的收录量”

这边能不能再次通过数据分析的方法进行SEO呢?

答案是肯定的!

 

我们再来重新走一遍 目标->分析->评估->决策 的过程

 

目标:提高目录页面的收录量

 

分析:通过本文开始的有关收录的两个因素,我们需要检查一下,网页是否被爬虫爬行过,网页的质量是不是过关。

 

1. 关于爬虫的情况,我们需要分析日志,才能确定。于是我们从日志中拆分一系列数据看看页面是否真的被爬行过。

2. 由于页面质量似乎是一个很难衡量的值,于是我们可以用相同模板下的:

已被爬行的页面数量/已被爬行并且被收录页面数量

来评估该模板页面质量对收录的影响大小。如果被爬的页面都被收录了,那至少说明这套页面的内容搜索引擎还算认可。(实际情况远比这个复杂,而且收录后也有可能因为质量问题被删除,但总比什么参照都没有要好,对吧!)

 

评估:(敏感信息用编号代替,均为真实数据)

 

先看一下爬虫日志的情况,通过Shell脚本,我们可以分析出。

目录总计被爬行的次数为13000次左右

不重复的目录爬行次数为5500次左右

频道A下的目录几乎被100%抓取过至少1次,频道B的目录抓取也不错,有70%被至少抓过一次。

其余频道下的目录被抓取的覆盖率不到30%

小议SEO的数据分析,如何改善网站收录 图4

不要觉得这个结果很神奇,其实很多网站都会面对这样的糟糕问题,只要你把数据不断的细分,细分,再细分,总会观察出一些端倪的。

 

关于日志分析,不要迷信任何的日志分析软件,那都是给懒人用的,自制脚本+Excel才是王道,可以拆分显示出任何你想要的数据,当然,甚至可以连Excel都不要。

 

然后,我们统计了一下被抓得最频繁的频道A和频道B,目录页的收录率

小议SEO的数据分析,如何改善网站收录 图5

 

频道A和B是很让人放心的,说明页面质量没问题,但是余下的收录情况就让人比较担心了。

 

决策:通过上面的数据评估,我们已经得到了如下结论。

页面质量并不是影响收录的原因。

频道A,B的抓取量异常的高,通过调查了解,原来是首页上的目录页,显示的全是频道A下的目录页,首页又拥有全站最高的权重。频道B拥有比其他频道强大的外链资源,权重也非常高。

除了A, B频道,其他频道的抓取情况不容乐观,抓取入口太少,太深,进而影响了收录情况。

很明显,现在频道A从站内的角度来说太强大了,必须进行一些“劫富济贫”的运动来降低频道A的抓取量,转移到其他频道中去。同时,需要给爬虫提供更多的入口抓取频道页。

现在问题变得清晰起来,我们开始把工作分成两部分:1.提供更多的入口 2.将资源平分给各频道而不是集中在少数几个频道上。

 

提供入口工作:

1.把目录页的URL制作成sitemap。提交给搜索引擎,并且将其设置为比较高的抓取权重。

2.完善面包屑导航,将面包屑导航划分得更加细致,以提供更多入口

3.在其他产品中推荐目录页

资源平分工作:(一些概念:任意页面都有可能成为爬虫入口,百度爬虫抓取深度有限,页面相对入口越浅,被抓取的概率越高。)

1.原先首页指向的都是频道A的目录页+产品页,将其全部nofollow,确保从首页进入的爬虫,全部抓取到频道页,通过频道页再进入目录页(其实这个不算太重要)

2.原先频道页指向自身的产品页,将其全部nofollow(确保从频道页入口的爬虫,最大程度的抓取目录页)

3.从目录页返回到首页的链接,将其全部nofollow。

4.减少一些页面上无关链接。(什么情况下这么做都是非常有效的。)

 

现在可以开始动手了。。

 

成果

 

这么做到底有什么效果呢,我们来看看修改后1个月后的数据。

小议SEO的数据分析,如何改善网站收录 图6

目录页的收录率提高了100%!

 

产品页的收录率也有一定程度的提高,这是归功于目录页对于产品的良好展现。

目录页的SEO表现:

SEO流量占比上升了15%

增长10%的到访关键词数量(新页面的收录)

SEO流量增长了50%以上。(包含一些季节因素)

 

备注

 

1.除了收录,排名也是问题,可以同步关注。

2.对于频道A这样特殊情况,甚至可以对其进行全屏蔽,但是技术上实现起来会略微麻烦。

3.百度对nofollow的支持据说很混乱,有认识百度内部人士可以帮忙问一下。

作者:夜息 来源:seo方法

让网站收录变快的方法

对站长来说,网站被百度收录是非常重要的事,但是有时网站的收录很慢,有没有什么简单的方法来让收录变快呢?

答案就是;利用百度站长平台的“链接提交功能”,这对老手来说就是小儿科了,但希望给新手一些帮助。

链接提交功能通过主动推送功能,把更新的内容主动提交给百度,百度搜索会通过原创识别算法挖掘出原创内容,被确定为原创的内容会得到快速收录和具体关键词下的排名保护。

在这里引用官方的话来说几点注意:

1,主动推送的收录速度是最快的,我们建议您定期将网站内新增高质链接通过此方式推送给百度,以保证该链接及时被百度发现。注意是新增高质链接,如果多次提交历史链接、低质链接,会导致我们不再信任您提交的数据。

2,自动推送:无需站长汇总URL再进行主动推送操作。借助用户的浏览行为来触发推送动作,省去了站长人工操作的时间。

3、sitemap功能可以用来向百度提交历史数据和重要数据,或者将一些定期例行更新的网页通过sitemap提交给百度。

4,在以上推送方式出现问题时,或者新制作的专题页无法通过实时推送提交时,手工提交也是值得信任的链接提交工具。

最后附上主动推送工具的地址:http://zhanzhang.baidu.com/linksubmit/index


小议SEO的数据分析,如何改善网站收录 - 网友评论:

武汉万海:还是要内容原创,自然收录就好

顶峰助力:还是要大量更新,原创有可读性的文章,才能提升排名和收录

伟德国际:原创才是王道,用户体验感觉好才是宗旨

慧佳商城:我想我的网站最近老是被降权的原因找到了,谢谢!

防静电拉:有些文章对于新手来说可能看不懂,但当你积累了一定知识的时候,再回过头看那些文章,你会觉得真是绝对的干货啊

便利店:保证文章的原创度是最重要的,然后以上说的几点只是尽快让百度抓取,收不收录是一方面,索引量才是关键

Satine:不要刻意去研究搜索引擎,这样太累了,做好自己的事,自然而然就好

一起学堂:SEO是个漫长而持续的过程,需要坚持优化才能看到效果,苦逼的站在们,快去创造奇迹吧!

庐山旅:我用了百度自动推送服务,很好用,过去的文章修改一下就能重新收录,很快。

井冈山:其实不止百度,生活中大部分人既喜欢新颖的东西也希望她实用

小成资源:我的网站几乎不被百度收录,但是360搜索倒是收录了几个

靠谱学生:百度的心,你措不透的,作好内容,作好流量,自然百度会给你好的回报

0595:每天坚持原创,以平常心对待,我的网站就是十分淡定的对待了,现在我的产品站也每天的流量都是在60以上

重庆坤洋:很历害很全面。提供了一个代面的大概方向,具体细节需要自己去研究

诺曼克:受教咯,做了两三个月一直浑水摸鱼,瞎猫碰到死耗子似的做了一个关键词排名很好

日记男孩:个人更喜欢google,百度太让人难以捉摸

深圳网站建设:所以做原创内容有的时候很尴尬,做优质内容吧,几下被人转发,自己的还排后面,伪原创吧,效果又不好

荷都论:最近我的网站百度收录掉了好多

柯大路:现在很多人的完整是为百度而生,百度可以给这些人丰厚的回报。

王牌网赚:对于做网站的站长来说这个真的很实用

IT人工:刚开始。来学习一下。百度就是反应慢。一个月也不更新我的站

点这里:写了这么多,感觉还是不错,只不过现在的流量从seo来的真的少了很多了,不再单纯的依赖seo了

夏瑜曦博客:终于明白为什么我的网站蜘蛛来的那么勤,而收录那么少了。

朱宇乐博客:这样看我的网站收录的价值不是很大了!

网站快速排名:确实是对大家很有帮助的一篇文章,写的超级不错,网站到达首页,推送者用就可以的

转载请注明来源:申永祥博客,(QQ:2320500181)原文地址:http://www.shenyongxiang.com/seo-da/2362.html

声明:博客内容除标记原创字样以外内容,均来自网络转载,版权归原作者所有,如涉及版权问题请及时联系处理。

上一篇:过去10年来,SEO技术有多大变化? 下一篇:SEO优化写大量原创文章值得吗