网络营销数据解读(六)——自顶向下,逐步求精
by MarsOcean on December 21, 2009
建议先 阅读本系列其他文章:
- 网络营销数据解读(一)——事情不是你看到的那样
- 网络营销数据解读(二)——事情不是你看到的那样
- 网络营销数据解读(三)——那又怎么样呢?
- 网络营销数据解读(四)——目标和指标
- 网络营销数据解读(五)——完善指标
(这篇文章比较基础,老鸟可以跳过了)
上次说到我们需要找到一组Metrics(指标)来衡量目标达成情况。为了达到这个目的,我们需要做的三件事情是:
- 了解我们监控到的数字的意义,找到合适的指标来衡量我们目的达成的效果。
- 研究数据,将无效和虚假的部分剥离。
- 通过测试、辅助指标计算和长期监控来分析隐性和长期效果。
好吧,回归我一向的风格,继续问问题:
- 假设网站(或者某个营销活动)的某个指标发生变化(例如在显著下降),我们该怎么找到数据变化的原因和应对方法?
- 假设我们已经设置好了一套完美的指标,通过监控得知campaign A在所有指标上都等同于campaign B,我们是不是就没法分析哪个campaign比较好?如果两个campaign不是完全相等,而是在某一个指标上相等(比如两个广告的conversion rate一模一样),我们是否就没法分析说我们接下来要怎样优化这个指标(比如conversion rate)? 如果做A/B测试的时候发现两种结帐流程的转化率一样,我们是不是就可以随便挑一个?
本想用常用术语的,百度了一下发现官方定义和我理解不一样,为免出丑还是用通俗概念来解释,不丢术语了:)。基本上,不管学术上解决问题的方法叫什么名字,具体的思路都很类似:如果一个大问题想不清楚,就把它拆成更好理解的小问题。借用一个程序设计领域的概念就是:自顶向下,逐步求精。
(预先警告一下:下面写的思考方法和技巧都非常基础,很可能你早就已经知道或者很熟练了)
可以采用的工具有:
1. 看分布:
基本上,凡是“总和”或者“平均”类的统计数据都会丢失掉很多重要的信息。
例如你打靶,第一枪向左偏了5米,第二枪向右偏了5米,第三枪向上偏了5米,第四抢向下偏了5米——平均来说,你射击的误差是零(因为都相互抵消了),成绩和枪枪命中靶心的世界冠军一样——这显然是荒谬的结论。
网络营销当中也常常会发生类似的事情:
- 上个月平均订单金额500元/单,这个月也是500元/单,看起来平平安安不需要操心。可是实际上有可能上个月5万单都是400~600元,而这个月5万单则是2万单300元,2万单400元,5千单500元,5000单超过2500元——客户购买习惯已经发生了巨大变化,一方面客户订单在变小(可能是因为产品单价下降,采购数量减少,或者客户选择了比较便宜的替代品),另一方面出现了一些相对较大的订单(可能是中小企业采购,或者是网站扩充产品线见效了)。——光看平均值的话很容易就忽视这些潜在的变化,不能及时的做出应对。
- 两个campaign带来一样多的流量(100万流量),而且流量的Average Time on Site(假设是40秒)是一样的,看起来两边差不多。可是两边的实际流量情况可能是千差万别:campaign A带来的50万流量停留0秒(具体原因参看之前写的网络营销数据解读(二)——事情不是你看到的那样),50万停留80秒;而campaign B带来的流量20万停留0秒,60万停留10秒,20万停留170秒。首先这个数据可以帮助我们去判别流量是否异常是否可能有作弊流量,其次它告诉我们说第一个页面bounce rate比较高,第二个比较低,可能是第二个页面的设计较好,然后它告诉我们说第二个页面虽然更能吸引人点击,但是那些人都是很快点击页面然后很快就离开了,这一点很值得和campaign A进行对比再深入研究。
解决的方法还蛮简单的,就是不要只看平均数和总数,而要多看看分区段的数据。
比如看Avg Time on Site,我们可以看个平均值,就好象:
也可以去查看分区段的数据,获得更深刻的理解,就好象:
从第一个数据里我们其实很难分析出原因,更别说想出行动方案。但是第二幅图就更加直接的告诉我们说Avg Time on Site短是因为很多人停留了不到10秒就走了——bounce rate过高。再去看那些bounce rate高的流量来源,发现主要是两个:1. 朋友的大网站上的友情链接,每天都带来海量流量,但是往往点开网页就走——因为我们的网站和朋友网站内容其实不太相关,用户也并不重合;2. 因为网站的名字比较特别,和某电视剧重名,所以很多搜索电视剧的用户来了网站——一看网站并不是讨论电视剧的就走了。然后我们可以根据这两个分析来得出一些结论和行动方法,例如之后问别人要友情链接主要要看用户的重合度,而不是流量。或者说要找出网站上所有可以和该电视剧匹配的产品做个特别的landing page,把那部分敲错门的用户留下来——抛砖引玉,关键是我们要看到“平均数”后面的东西,这样才能有深入的洞察,也才能够有合理的行动方案。
2. 拆因子,拆构成
除了分隔区段来查看数据详情之外,比较常见的方法还有拆因子和拆构成。
同样看看例子:
网站转化率下降,我们要找原因。因为”转化率“=”订单“/”流量“,所以”转化率“下降的原因很可能是”订单量下降“,”流量上升“,或者两者皆是。按照这个思路我们可能发现说主要的原因是”流量上升“而”订单量升幅不明显“,那么下面我们就可以来拆解”流量“的构成,例如拆成”直接访问流量“、”广告访问流量“和”搜索引擎访问流量“再看具体是哪部分的流量发生了变化,接下来再找原因。这时我们可能可以看到说是搜索引擎访问流量上升,那就可以再进一步分析说是付费关键词部分上升,还是自然搜索流量上升,如果是自然流量,是品牌(或者网站名相关)关键词流量上升,还是其他词带来的流量上升——假如最后发现说是非品牌类关键词带来的流量上升,那么就再找原因——市场变化(淡季旺季之类),竞争对手行动,还是自身改变。假如刚好在最近把产品页面改版过,就可以查一下是不是因为改版让搜索引擎收录变多权重变高。接下来一方面要分析说自己到底哪里做对了帮助网站SEO了(比如把页面导航栏从图片换成了文字),把经验记下来为以后改版提供参考;另一方面要分析说哪里没做好(因为新增流量但是并没有相应增加太多销售),去研究怎样让“产品页面”更具吸引力——因为对很多搜索引擎流量来说,他们对网站的第一印象是产品页面,而不是首页。
3. 拆步骤
一般来说,这一步会画个漏斗图(前面几个步骤也都会画些漂亮图来展示以示专业)
举两个例子:
第一个例子:两个campaign,带来一样多的流量,一样多的销售,是不是说明两个campaign效率差不多,我们没什么好总结好学习的?
可是,如果我们把每个campaign的流量拆细,去看每一步,就会发现不一样的地方。Campaign B虽然和Campaign A带来了等量的流量,可是这部分流量对产品更感兴趣,看完landing page之后更多的人去看了产品页面。可惜的是虽然看产品的人很多,最后转化率不高,订单数和campaign A一样。
这里面还可以再深入分析(结合之前提到的分析方法,和下一章要说的细分方法),但是光凭直觉,也可以简单的得出一些猜测来,例如两个campaign的顾客习惯不太一样,campaign B的landing page设计更好,campaign B的顾客更符合我们的目标客户描述、更懂产品——但是我们的价格没有优势……这些猜想是我们深入进行分析,得出行动方案的起点。至少,它可以帮助我们更快的累计经验,下次设计campaign的时候会更有的放矢,而不是仅仅写一个简单report说这两个campaign效果一样就结案了。(注:这是个简化的例子,实际上还可以分更多层)
第二个例子可能更常见一些,比如网站转化率下降,我们可以拆成这样的漏斗:
这样拆好之后,更能清楚地看到到底是哪一步的转化率发生了变化。有可能是访客质量下降,都bounce掉了,也可能是“购物车–>登录”流失了(如果你把运费放到购物车中计算,很可能就看到这一步流失率飙升),这样拆细之后更方便我们分析。
见过一个例子就是转化率下降,MKT查流量质量发现没问题,PM查价格竞争力也没问题——最后发现是MIS为了防止恶意注册,在登录页面加了验证码(而且那个验证码极度复杂),把“登录页面–>填写订单信息“这一步的转化给降低了。
这篇文章比较基础……说到这里前面提的两个问题应该很好答了。
老规矩,最后问个问题:如果我们有了用于衡量网络营销效果的完善的指标,从这套指标看,campaign(或者页面改版,或者其他任何东西)A在各项指标上都和campaign B相当,而且我们把指标分区段、拆细,分步骤看漏斗图都看不出什么东西,我们应该怎么做?
下次说:)
27 comments
[...] 来源:http://www.marsopinion.com/2009/12/21/how-to-interprest-online-marketing-data-in-depth/ 你可能还会喜欢以下内容网络营销数据解读(五):完善指标网络营销数据解读(四):目标和指标网络营销数据解读(三):那又怎么样呢?网络营销数据解读(二):事情不是你看到的那样网络营销数据解读(一):事情不是你看到的那样案例:互联网的Perfume 噪音中脱颖而出四个有趣的网络营销案例 关注:从网络灌水大军到新型营销系统 [...]
by 网络营销数据解读(六):自顶向下,逐步求精 | 互联网的那点事 on December 21, 2009 at 5:19 am. #
主要想增加内链,呵呵 不好意思,如果不行,我就改回来,请给我留言。
文章很好,订阅了
by alibuybuy on December 21, 2009 at 6:36 am. #
嘻嘻,漏斗模型分析是网络营销比较常用的手法,利于深度挖掘分析用户行为,网站功能利弊与提高转化率。不过我有个问题,Mars以你的经验,你认为一个事件营销可以以流量和转化为导向吗?这样能否实现?还是只能实现基于品牌的营销传播?
by money on December 21, 2009 at 6:39 am. #
上课
by 洪成浩 on December 21, 2009 at 7:23 pm. #
@money:事件营销可以以流量和转化为导向啊,比如“卖蚊子”这件事对那家淘宝店的影响。另外一号店评选“最受欢迎的前台MM”感觉也会对流量、销售和品牌影响都有促进。
by MarsOcean on December 22, 2009 at 10:22 pm. #
用你的思想回答你的问题:
可以在campaign之后看长期效果…
by William on December 22, 2009 at 11:04 pm. #
推荐阅读《统计数据会撒谎》,在做数据分析前,知道工具的缺陷比较好。
by ant on January 5, 2010 at 10:54 pm. #
@ant: 好像看过这本,或者是一些类似的书,却是很有用:)。这篇文章其实也有点在说统计数据的局限(例如“平均”‘、“总和”常常就会误导人,对于同一套统计数据采用不同的表述也会让人得出不同的结论。
本来的计划是再过两篇文章然后写一个简单的营销统计学入门,介绍一下样本啊置信区间啊假说什么的:)
by MarsOcean on January 6, 2010 at 3:04 am. #
那几张图效果很好啊!!
问下Mars,用什么工具做的?
by 猫咕 on January 12, 2010 at 12:31 am. #
@猫咕:嗯……这个,是用PowerPoint做的,我刚好要做一些相关的培训PPT:)
by MarsOcean on January 12, 2010 at 3:20 am. #
[...] 网络营销数据解读(六)——自顶向下,逐步求精 [...]
by 待读文章 on January 19, 2010 at 5:36 pm. #
[...] 作者:MARS 链接来源 [...]
by MARS:网络营销数据解读 (全集) - 色博士有一说二 on January 24, 2010 at 8:37 pm. #
[...] 转载声明:转载时请以超链接形式标明文章原始出处: http://www.marsopinion.com/2009/12/21/how-to-interprest-online-marketing-data-in-depth/ [...]
by 网络营销数据解读(六)——自顶向下,逐步求精 | LAZYLOVE 网络品牌营销 on January 27, 2010 at 9:37 pm. #
[...] 总数和平均数往往会误导,就好像图中几个小人的号码一样,不管你拿到总数还是平均,对他们都会有一个错误的估计。(案例见网络营销数据解读(六)——自顶向下,逐步求精) [...]
by 数据驱动的网络营销(PPT + 简述) - 互联网专业知识媒体 on February 4, 2010 at 9:01 am. #
[...] 总数和平均数往往会误导,就好像图中几个小人的号码一样,不管你拿到总数还是平均,对他们都会有一个错误的估计。(案例见网络营销数据解读(六)——自顶向下,逐步求精) [...]
by 数据驱动的网络营销(PPT + 简述) | LAZYLOVE on February 9, 2010 at 12:33 am. #
你好,这篇文章已经看过几次了,你在北京的讲座里这个部分在你说的实验环节也提到了吧,回来后,我们公司就以这个结构化的方法开始实验,但是一旦开始做就会发现,问题远远比想象的多的多呢,想问问你一些我们遇到的问题,希望可以看到你的回答,谢谢。
首先,降低跳出率。
我们是按照这个漏斗的顺序开始逐步实验的,第一步就是从流失量最多的开始,也就是降低跳出率。
跳出率有很多影响因素,你提到的广告的匹配程度是一个方面,第二个是页面内容和设计的问题。
我们准备的是设计几个不同类型的入口页面,分别从内容和设计出发
内容。主要是和广告的匹配程度,或者是搜索关键词的贴合度出发,除此以外,由于我们是医疗类的网站,并且不能在线支付,所以我们在考虑是否要设计N个模式,进行一线式引导…这样问题就复杂了。
设计问题。比如模块的放置、按钮的大小位置等等。
单单是这样实验起来,变量就会很多,或许是我们考虑复杂了,但是还是觉得这个实验的过程无从下手。希望听听专业的意见:)
问题还有很多,但是突然一下又没有汇总,写的这些也比较混乱,主要还是关于你说的实验的具体操作方法。谢谢
by yymida on February 23, 2010 at 1:39 pm. #
实验的话过一阵子我会写文章细讲。基本上步骤应该是:
1. 观察 (看数据,看热点图)
2. 分析 (猜测可能的原因,看能否不用通过实验就找到一些结论。例如你把流失率去和同业对比,或者把各个segment的表现数据对比……之类)
3. 提出假设,要根据前面的分析得出一个假设(例如”我觉得我们的页面跳出率高是因为参加活动的按钮显示在了第二屏,消费者没看到“)
4. 实验验证,对照组把按钮依然放第二屏,实验组把按钮放第一屏。
5. 分析试验数据。
总的来讲,开始做的时候可能得耐心一些:
1. 这个东西需要经验积累的:),慢慢来,先从简单的来,很难说有什么万能公式——这也是好事情,否则这个活就很容易被机器取代:)
2. 做实验之前要先有自己的假说论点,否则做实验比较没有目标,发散太广;
3. 先做简单的(比如单变量的对比)、容易实现的实验,有经验了再慢慢做复杂的。上手直接做多变量的是蛮头疼的。。。我现在手头也找不到之前自己做来玩的分析模板,等写到这章节的时候再做一个Excel模板分享出来吧。
by MarsOcean on February 23, 2010 at 2:13 pm. #
我们已经在准备用SPSS软件了。。。
完全的实证研究了吧,但是我总觉得中间没有这么复杂。。。
by yymida on February 23, 2010 at 2:15 pm. #
。。。
你强:),我只在3年前用过SAS。最近两年退化了,都在用Excel(加载了了免费的统计学的数据包)。
加油。你公司网址是?
by MarsOcean on February 23, 2010 at 2:25 pm. #
http://www.ansiding.com
我都不好意思写,网站实在做的很差,我们都不满意呵呵,很多想法,实施起来却很难。。。
by yymida on February 23, 2010 at 2:27 pm. #
PS:还有个重要的问题,我们做的主要是竞价搜索,目前就这个方面和大型的营销活动比起来有很大的不同。
★关键词多,匹配的广告形式多
如果一一标记的话,其实是可以做到的,可是标记完了如何监测,怎么管理?
同时,数据量分散,不知道如何衡量,甚至有的时候不知道有些数据是否有统计意义……
by yymida on February 23, 2010 at 2:08 pm. #
如果关键词太多,你可以以“组”(ft, 不知道现在是不是这样叫)为单位来管理,只有当某“组”的数据异常时才深入进去看词。对于词来说,你也应该有自己的一套内部的分组方法(不同于产品线分组),例如分成“品牌词”,“产品购买词”,“产品详情词”,“类别大词”几种,每种下面再分成几小种(例如”产品购买词“又分成”网购组“,”询价组“,”发票组“,”快递组“),每组下面都是相关的词(例如”LX3数码相机带票价格“就在”发票组“下面),这样子更容易看出哪一类词表现好表现不好,再做优化。
说实在的,我觉得关键词管理将来的趋势应该是自动化管理,也设想过相关算法,不过短期内估计还没有特别好用的工具……
是否有统计意义……得去翻统计书,很简单的看一下置信区间什么的就好了,自己做个excel模板以后套用就好了。
PS.
1. 我最近2年都没有实际动手操作过关键词竞价(只是指手画脚过……),所以建议仅供参考,希望方法没有过时;
2. 这些事情里面经验和sense都很重要,不是说有个万能公式说数字这样我们就能那样:)
3. 慢慢来,加油。
by MarsOcean on February 23, 2010 at 2:23 pm. #
:)一起加油
我们还是菜鸟呵呵
把你当榜样
by yymida on February 23, 2010 at 2:26 pm. #
[...] 网络营销数据解读(六)——自顶向下,逐步求精 [...]
by 网络营销数据解读(九)——客户族群细分(Segmentation)2-2 » Mars Opinion on April 21, 2010 at 10:07 pm. #
[...] 网络营销数据解读(六)——自顶向下,逐步求精 [...]
by 网络营销数据解读系列 « 旺旺淘宝 on May 1, 2010 at 2:40 pm. #
学习了。。。。
by 三国杀 on May 18, 2010 at 10:37 am. #
[...] http://www.marsopinion.com/2009/12/21/how-to-interprest-online-marketing-data-in-depth/ [...]
by 互联网产品的数据解读(五)——自顶向下,逐步求精 | 蓦然回首 on September 9, 2010 at 10:10 pm. #