目录
目 录
赞 誉
前 言 试验不息 创新不止
第 1章 数据驱动是试验本质 // 1
1.1 生活处处有试验 // 1
1.1.1 “鸟”生浮沉启示录:达尔文雀的自然进化试验 // 1
1.1.2 林德试验:现代医学离不开 A/B 测试 // 6
1.1.3 洁面霜卖点效应:现代广告史就是试验发展史
// 9
1.2 数据分析与试验 // 11
1.2.1 数据不只是数字堆叠 // 12
1.2.2 后验数据分析的局限:数据的“漂亮”与“丑陋”// 13
1.2.3 试验:数据驱动业务增长的力量 //
15
1.3 试验的思维 // 17
1.3.1 快速试错的互联网思维 // 17
1.3.2 试验驱动创新,创业依赖试验 // 19
1.3.3 依赖试验的增长黑客 // 21
1.4 试验驱动业务增长 // 23
1.4.1 试验让低成本探索成为可能 // 23
1.4.2 试验驱动增长无处不在 // 25
1.4.3 试验的频率决定发展的速度 // 26
1.4.4 新时代,试验文化正当时 // 28
?
第 2章 A/B测试是成功的试验方法 // 31
2.1 互联网时代的 A/B测试 // 31
2.1.1 谷歌的 A/B测试潮流 // 32
2.1.2 微软、亚马逊、脸书的经验 // 33
2.1.3 新生代 Airbnb的融会贯通 // 36
2.1.4 A/B测试是企业的标配 //
41
2.2 深入解析 A/B测试 // 42
2.2.1 A/B测试的定义 // 42
2.2.2 A/B测试的特性 // 43
2.2.3 A/B 测试的试验类型 // 45
2.2.4 “伪”A/B测试 // 46
2.2.5 A/B 测试的统计学原理 //
51
?
第 3章 A/B测试的作战计划 // 63
3.1 试验的战略制定 // 63
3.1.1 明确战略目标 // 63
3.1.2 制定战略路线图 // 64
3.1.3 管理试验项目 // 68
3.1.4 搭建试验的基础设施 // 70
3.2 试验的战术执行 // 72
3.2.1 探索、验证闭环:试验驱动业务优化的流程
// 73
3.2.2 试验方案设计 // 78
3.2.3 试验的优先级排序 // 82
3.2.4 高频试验管理 // 85
3.3 快速上手一个试验 // 87
3.3.1 收集数据,发现问题 // 88
?3.3.2 建立试验目标 // 90
3.3.3 提出试验假设 // 91
3.3.4 运行试验,验证假设 // 93
3.3.5 分析试验数据,做出决策 // 94
?3.3.6 积跬步至千里,持续优化是关键 // 95
3.4 实战:从零开始一次 A/B测试 // 96
?
第 4章 A/B测试的完整解决方案 // 110
4.1 行业: A/B测试在各行业的应用 //
110
4.1.1 电商经典案例 // 110
4.1.2 金融经典案例 // 113
?4.1.3 教育经典案例 // 115
4.1.4 旅游经典案例 // 117
?4.1.5 消费品牌经典案例 // 120
4.1.6 其他行业(UGC、PGC、媒体网站、SaaS)// 124
4.2 场景: A/B 测试在各种业务场景中的应用
// 132
4.2.1 着陆页优化 // 133
4.2.2 App优化 // 139
4.2.3 网站体验优化 // 145
4.2.4 技术优化 // 148
4.2.5 算法优化 // 151
4.2.6 基于 A/B测试的科学运营系统
// 154
4.3 人群: A/B测试是创新人才的必备技能
// 156
4.3.1 决策 // 157
?4.3.2 产品 // 160
4.3.3 运营 // 166
4.3.4 市场 // 172
4.3.5 技术 // 174
第 5章 试验星火,终会燎原 // 178
5.1 人工智能 // 179
5.2 新 // 182
5.3 AR、VR、新硬件 // 184
5.4 区块链 // 186
?5.5 智慧城市 // 187
附 录 // 191
附录 A AARRR模型的介绍 // 191
附录 B A/B测试术语表 // 194
附录 C A/B测试需求分析模板 // 202
附录 D 试验档案表格 // 203
附录 E 快速上手一个试验模板 // 204
扫封面上作者简介处的二维码,可免费获取书中所有模板。
主编推荐
王晔博士率先将硅谷的A/B测试理论、方法与技术引入中国,探索中国的试验创新之路。有理论,有作战计划,有行业、场景和人群的完整解决方案,更有开拓思路的案例和总结。快速上手的模板,让你放下书知道应该做什么,从哪做起。全彩印刷,160幅精美图片,阅读体验好,便于了解细节。
精彩内容
我们如今看到的各种互联网产品的改版以及创新,其背后都离不开许多上市之前的试验工作,其中被互联网、移动互联网行业广泛应用的试验方法是A/B测试。A/B测试的本质是试验,作为一种新兴的网页优化方法,通过对比试验增加转化率和注册率,带来产品和运营的创新,以实现各项指标的增长,如今它更是增长黑客所必备的核心思维方式和工作方法。在流量日渐昂贵、精细化运营的大环境下,互联网产品、运营和市场营销人员需要具有A/B测试思维,以测试结果为依据做决策,优化页面,提高转化率,迭代产品。
本书作者因在谷歌总部工作时发现了A/B测试的巨大作用而回国创业,并将自己对试验的理解和多年的经验进行梳理,在书中介绍了试验的本质、A/B测试的概念和价值、 A/B测试的方法论和实战步骤,以及电商、金融、教育、旅游、快消品、UGC、PGC、媒体网站、SaaS等行业的应用案例,着陆页、App、网站、服务器端和算法等不同场景的优化案例,还有针对决策者、产品经理、互联网运营、市场营销和工程师的案例。
媒体评论
广告行业有句老话:“总有一半的广告费是浪费了的,但是不知道是哪一半。”这句话在广告行业一直正确,直到互联网和移动互联网让广告和行为在线化和数据化,这句经典语录终于开始有了不同的可能性。同时,经过接近八年的快速发展,移动互联网用户也从以增量用户驱动进入对存量用户运营。以上这两个趋势和变化,都指向了一个方向:我们可以更加了解用户到底是如何选择、如何决策的,而这个问题的背后就是本书中所深入浅出解释的“A/B测试”。
?—李丰,峰瑞资本创始人
随着数字营销的投入越来越大,我们对数字营销的转化效果也越来越重视。本书介绍的 A/B测试方法,还有 A/B测试在营销创意优化的实践经验,给我们很多启发。本书给关心市场营销的朋友阅读,可以帮助大家在日后的工作中持续地提升营销效果。
?—宋星,纷析咨询创始人,互联网营销技术与数据专家
过去几年,我们总谈人口和流量红利,今后几年,我觉得应该是数据和方法论红利。而增长黑客和 A/B测试就是企业急需掌握的两个数据驱动增长的方法,能够先人一步体系化运用的公司,会在下一轮竞争中拥有明显的优势。王晔老师的这本书理论扎实、案例丰富,是不可多得的学习 A/B测试的教科书。
?—曲卉,前增长黑客网(growthhackers.com)负责人,《硅谷增长黑客实战笔记》作者
伴随人口红利的衰减和移动浪潮的消退,高歌猛进的欢喜时代悄然落幕,人们对挖掘增量和对盘整存量的做法莫衷一是,有人认为要追逐价值,有人索性附庸于流量。“物竞天择、胜者为王”,硅谷的成熟科技公司善于利用 A/B测试等试验手段来演算自身商业发展的*路径。王晔博士的这本书将为你带来超前沿的一手洞见。
?—范冰,《增长黑客》作者,增长官研究院创始人
互联网公司*的是快速迭代和数据驱动,而这背后的关键技术就是 A/B 测试。小到颜色调整、按钮摆放,大到文案设计、产品逻辑,都可以用 A/B 测试来驱动产品的创新优化。可以说哪个团队真正用好、用足了 A/B 测试,哪个团队才成为真正数据驱动的互联网团队。可惜国内用好的团队很少,大公司有自己的产品,王晔从 Google(谷歌)回国创建吆喝科技公司,瞄准这一方向,三年来发展了不少用户,可是发现用好的团队却不多。这也是他撰写这本书的动力,让更多的开发团队更深入地理解 A/B Testing的重要性、方法以及成果。“微小的差异决定了谁将生存,谁将毁灭”,细节的累积*终决定成败,决定细节需要数据驱动,数据驱动决策要靠 A/B 测试,希望开发者、产品经理充分使用 A/B 测试,我们的互联网产品就会越来越好。?
—蒋涛,CSDN创始人
数字化时代生存必备的技能之一,就是拥有试验思维并且精于开展针对性的测试。大到商业模式的验证,小到一个广告创意的优化,概莫能外。王晔在 A/B测试 SaaS领域创业的同时,还能将自己的丰富经验和实战案例编撰成上乘之作,让人敬佩!?
—熊长青,亦合资本创始合伙人,九枝兰创始人
有王晔“老司机”带路,A/B测试之道将充满旖旎风光。本书将 A/B测试的来龙去脉、理论实践和经验教训等都介绍得清楚。其中丰富的案例令人印象深刻,很多案例都有很好的参考意义,另外,书中介绍的 A/B测试的基础理论也是有价值的,它帮助人们设计更科学的试验方案。?“Fail Early,Fail Often,Fail Forward”(早试错,常试错,敢试错)是硅谷很多科技公司的创新理念。在很多创新的领域中,低成本和低风险的试错是持续获得更大成功的重要基础。试错就需要一个可靠的和科学的试验平台来支持 A/B测试。我们从 A/B测试获得的不仅仅是更优的手段,也有数据驱动的精益运营的理念。数据时代,企业都在不遗余力地收集数据,“小步快跑”地激活数据,探问不止地驱动数据,A/B测试作为一种重要的试验方法,对于企业提升产品或服务的用户体验有重大的意义。如果我们来做一次测试,为了优选出市场上*好的 A/B测试参考书,我相信,无论此书在对照组还是在试验组,都能够获得胜利。?
—欧阳辰,品友互动 CTO(席技术官)
互联网时代,环境快速变化,企业必须采用全新的数据驱动的决策体系和创新模式。试验迭代( A/B测试)是其中*为核心的一步,也是 Facebook(脸书)、Google、今日头条等知名企业不断创新和增长的秘密和源泉。王晔博士结合自己在硅谷知名企业的见闻和体会,以及与中国数百家企业合作的实践经验,总结出一套企业试验的思维、方法、工具和实战案例,值得所有企业管理者和一线员工好好借鉴和应用。
?—孙天澍,USC(美国南加利福尼亚大学)马歇尔商学院教授
王晔深耕增长行业多年,从耶鲁到谷歌,把增长的方法论和工具带到中国互联网,是 A/B测试在中国很早、很卓有成效的布道者。《A/B测试》这本书是互联网江湖的“九阴真经”,王晔将各个细分领域的案例深刻剖析,读来宛如按图索骥,不仅为读者描绘了增长天堂的模样,还搭好了云梯,字字珠玑!?
—周喆吾,MetaApp联合创始人
产品经理的日常之一就是“吵架”,每次跟老大过方案或者跟需求方过方案都会吵架,谁都说服不了谁,因为所争执的点通常都是“假设”或者主观的东西。每次吵完都是内伤,虽说“对事不对人”,大家要理解吵架的行为,都是为了把产品做好,对用户负责,对公司负责……如果想解决吵架问题或者降低吵架的概率,大家能开开心心地把事做好,我觉得很好的办法就是做 A/B测试,通过 A/B测试,记录下用户的使用情况再进行分析,就能知道哪个方案更靠谱。?
—曹成明,起点学院、人人都是产品经理网站创始人兼 CEO
这是一本重量级的 A/B测试参考书,可以整体提高中国互联网从业者数据驱动的认知和能力。企业具备数据驱动的文化、流程和工具是关键的,A/B测试就是重要的工具之一。希望本书能够帮助推动各行业通过数据挖掘和数据产品的广泛应用,找到健康增长的飞跃曲线,让每个互联网团队都体会到数据科学和试验迭代的巨大价值。?
—顾青,DTALK创办人,E-Bizcamp CEO?
“优化”是运营一款产品的上好策略。接手一个业务问题,运营人的*思维是“分析数据、找出原因、提出解决方案、上线执行”四步完成,而往往忽略了关键的一环:解决方案的质量。解决方案一旦失败,就意味着浪费运营资源。而试验的价值,就是把这种浪费打消于无形,掌控成功。我曾在博文中说过一句话:“神一样的运营经理,先是一个把脉高手,其次是个试验狂人,二者缺一不可。”这本书能帮你变身运营高手,是一本实战指南式的好书。?
—韩利,《运营实战指南》作者?
A/B Testing(A/B测试)这个词儿很时髦,做互联网产品的人差不多快挂在嘴边了。然而,行业内的人其实多少都知道,国内真正把这个理论落到实处的公司凤毛麟角。这在移动互联网趋势和流量红利爆发的上半场似乎没问题,甚至天经地义,因为那时候跑马圈地是*要务。然而在移动互联网进入深耕细作的下半场的今天,这个问题就越来越凸显了,如何针对存量用户进行业务的优化?国内互联网巨头和硅谷知名公司在技术驱动的理念和基础设施上的差距已经被越来越多的人认识到了。这些年看着 Sando 和吆喝科技的 A/B Testing产品一路迭代,越来越成熟,也越来越贴合国内用户的使用场景,我深感欣慰。所以每当有人说起 A/B Testing解决方案时,我也都会毫不犹豫地在*时间就吆喝科技。感谢 Sando 的这本书,帮助我更深刻地理解了 A/B Testing,也让我知道了为什么吆喝科技在这个领域内能独树一帜。?
—彭圣才,“菜园子”产品经理社区创始人
百度于 2010年年初引入 A/B测试,用于评估网页搜索结果 UI(用户界面交互)的变更,对比不同商业策略对于业务指标的影响;腾讯则更早在频道页的改版中采用类似的评价机制。今天,A/B测试在互联网产品的开发中被越来越多地采用,发挥着无可取代的作用。本书由业内人士撰写,为读者呈现这一领域的全貌。?
—轩,百度技术专家
在商业竞争如此激烈的今天,任何成功都需要每个点能够*化。这种*化不是想出来的,需要不断假设、验证和总结,这其中 A/B测试无疑是一种宝贵的思维方式。?
—许静芳,搜狗搜索总经理
中国移动 10086和其微信、微博、App等互联网服务渠道覆盖 7亿用户,为实现持续增长和转化,我们设立 15人的数据增长团队,将自动化 A/B测试应用于图文、海报、菜单、着陆页等关键场景的设计工作中。经过持续运营,商品下单率提升 484.8%,活动转化率提升 112.7%,资讯阅读率提升 185.1%。实践证明 A/B测试是互联网团队必备的能力,在精细化运营的互联网下半场,本书给了我们更多指导和方向。?
—陈庆,中移在线互联网运营中心副总经理
王晔兄将自己多年从事与 A/B测试相关工作的方法论融合到书中,结合理论、案例实践和工具使用等多个方面介绍了 A/B测试在互联网应用的内涵与外延,是国内目前介绍 A/B测试难得的一部著作。?
—樊聪,前美团点评 A/B测试系统负责人,现旷视科技技术总监
以下为对购买帮助不大的评价