字节跳动的技术秘密，正在开放给更多其他公司

字节跳动的技术秘密，正在开放给更多其他公司杨幂h合成图 前不久在广州召开的抖音电商大会上，几位商家忍不住感慨抖音推荐的精准。他们说不上来背后的原因，但最大的直观感受是，同一款商品，在抖音上卖货量比其他平台更多，因为能推给最想买货的人。

前不久在广州召开的抖音电商大会上，几位商家忍不住感慨抖音推荐的精准。他们说不上来背后的原因，但最大的直观感受是，同一款商品，在抖音上卖货量比其他平台更多，因为能推给最想买货的人。

4月20日，字节跳动向外界公开了以数据驱动提升推荐效果的评估方法，并宣布把A/B测试等数据驱动的工具通过火山引擎提供给企业伙伴。在互联网大厂中，字节跳动一向以算法强著称，这背后数据驱动发挥了什么作用？字节跳动副总裁、算法和数据技术负责人杨震原通过讲述A/B测试，讲述了字节跳动的增长秘密。他从2014年来到字节跳动，就负责这项业务，让“玄学”变为现实。

01

仿制平行世界的实验

你要花一笔钱实现某个效果，有两种花钱方法能实现你的目的，哪种方法更好？

没有A/B测试之前，这是个玄学问题，或许只有在平行世界里做同步尝试，才能有回答。有了A/B测试之后，可以最大程度接近这个答案。

“A/B测试是一个更接近真实、更能够把握住本质的一个方法，而不是只依赖经验判断。”杨震原说。

早期有记载的A/B测试，是在1747年詹姆斯·林德治疗坏血病的临床实验。当时的英国海军船员，由于长期出海吃不到新鲜的蔬菜水果，经常受到致死率极高的坏血病的折磨。詹姆斯·林德设计出了一个实验：他把六对患有坏血症的水手们集中在船上的的医疗室，除了每天相同的饮食外，给每对水手提供不同的可能有效的治疗：包括苹果汁、醋、海水、柠檬和橘子等。一段时间后，四对水手的病情没有任何好转，喝苹果汁的水手的病情有轻微改善，而吃柠檬和橘子的那对水手竟然奇迹般康复了。

近代互联网时代，也有很多受益于A/B测试的案例。2007年，谷歌的产品经理丹·西罗克把谷歌在网站上的一个做法移植到奥巴马竞选的募捐网站上，就是A/B测试，并产生了巨大的成功。令竞选团队吃惊的是，在所有情况下，奥巴马的一张简简单单的黑白全家福照片所取得的效果，竟然超过团队可以找到的任何其他照片及视频。经过A/B测试验证的优化手段加到一起，促使捐款金额增加了5700万美元。亚马逊也有同样的尝试。亚马逊在自己的电商网站上推广信用卡广告，最初这条广告放在购物页面里，几乎无人问津，浪费了宝贵的广告位资源。当业务经理尝试把这条广告放在结算页面时，用户就会发现这张信用卡的好处。A/B测试的实验数据显示，将广告改为放在结算页后，带来了年化上亿美元的营收增长，业务经理以实验结果证明了自己想法的价值。

“当我们想观测某个方面，比如说人群或者某类产品，就把人群和产品分成A、B两组，比如你的操作是发红包，或者改了设计页面，又或者是做了运营活动，除了这些操作之外，其他的分布完全一样，就是一次A/B测试”，杨震原解释A/B测试的意义时说，“这件事情可以无限逼近平行宇宙”，充分地做A/B测试，是一个能够在很大程度上补充信息的过程，能够消除很多偏见，能够带来很多客观的事实。

字节跳动也是一家受益于A/B测试的公司。早在2012年，字节跳动创始人张一鸣自己动手写代码，对今日头条的推荐策略进行分组测试，那是字节跳动A/B测试平台的初始。

02

字节跳动的技术秘密

杨震原2014年来到字节跳动，当时他所做的事，就是提升今日头条产品的用户体验，把推荐做得更好。杨震原把A/B测试作为评估推荐效果的重要方法，进一步推动A/B测试的平台化，让它更严谨，以及发现它的问题，在公司中更广泛地使用。字节跳动从2012年一家名不见经传，且竞争激烈的公司，一次次突出重围，A/B测试这种方法起到了很大作用。

现在，A/B测试已经成为字节跳动一项非常基础的工具，支撑了抖音、今日头条等产品的增长迭代。目前，字节跳动A/B测试每日新增1500+实验，服务于400多项大大小小的业务，累计做了70多万次实验。大到产品命名、交互设计，小到修改一个字体、一个弹窗、界面大小，字节跳动都会做A/B测试，甚至连抖音名字的诞生，也是通过A/B测试结合产品团队的意见选出来的。

2016年，字节跳动建立了支持大规模产品实验的A/B测试平台，之后陆续接入抖音、西瓜视频等全线业务。到2019年时，A/B测试已经不只是内部平台，而是正式立项，开始做对外平台，给外部更多客户来用这项产品。

03

正在向外部开放

悟空租车就是一个正在使用A/B测试的外部公司。该公司已通过火山引擎进行了70多次A/B测试，约有60%为正向实验，提升产品转换率约40%，以往需要一周时间的需求复盘数据分析，现在只要一天就能得到数据结论，更直观地量化了需求价值，极大地提升了效率。

目前，火山引擎A/B测试支持客户端、服务端、推送、网页、可视化建站等多种实验形式，具有功能全面、高度自动化的特点，操作非常简单，即使不会编程的人也能轻松做实验，而且有内容丰富的实验报表，可智能产出实验结论，让决策链清晰完备。

除了A/B测试外，杨震原表示，字节跳动积累的技术能力和增长方法，会通过火山引擎提供给企业客户。火山引擎产品体系包括基础服务、技术中台、智能应用和行业解决方案，字节跳动的视频编辑、特效、文字识别、图像识别、个性化推荐等技术能力，都已在火山引擎上为企业服务。

“在公司中更广泛地使用A/B测试，我相信对提高整个公司的决策质量是很有帮助的。”杨震原说。

/文