如同很多大型互联网公司一样,当自身的产品能力得到验证,并随着规模化出现能力溢出时,字节跳动也开始了面向企业级客户的to B转型。
4月20日,字节跳动举办了火山引擎技术开放日活动,由字节跳动副总裁、算法和数据技术负责人杨震原首次对外揭秘,字节跳动如何使用A/B测试。
所谓的A/B测试,是指对不同策略进行对比实验,根据结果选择最优方案的过程。一直以来,A/B测试都被认为是字节跳动快速增长的重要推动力,因为今日头条、抖音等产品都是基于A/B测试实现产品迭代。
而现在,字节跳动已经把自己使用的A/B测试工具通过火山引擎开放给企业客户。杨震原在分享时也坦言,举办技术开放日,除了分享技术外,也有一点私心,就是希望产品能卖到更多地方去。
据悉,火山引擎是字节跳动旗下为企业服务的智能科技品牌,其产品体系包括基础服务、技术中台、智能应用和行业解决方案,而A/B测试工具,只是其众多智能应用产品的其中之一。
记者从火山引擎官网了解到,火山引擎提供的智能应用产品包括智能内容套件、内容创作套件、智能体验套件、个性化推荐套件、智能营销套件、智能运营套件以及业务安全套件等;技术中台产品则包括AI中台、多媒体中台、数据中台和研发中台;基础服务则包括容器服务、存储、公有服务和私有云等。
一般来说,企业级服务的产品会按照IaaS、PaaS、SaaS来分类,而字节跳动目前提供的产品,是PaaS和SaaS居多。当然,火山引擎也只是刚刚起步,随着字节跳动开放更多能力,火山引擎的产品矩阵也会得到进一步丰富。
杨震原表示,在字节跳动看来,激发创造不仅是支持个人创作者,也是支持企业。而这,也是火山引擎to B的愿景。
产品工具久经考验
对字节跳动来说,火山引擎就是其to B的一个窗口,内部积累的技术能力和增长方法,都可以通过这个窗口提供给企业客户。换个角度来看,也可以理解为火山引擎的产品,都是经过字节跳动业务实践的。
比如A/B测试,据杨震原介绍,公司成立之初,今日头条就在做策略推荐类的A/B测试。2016年,字节跳动建立了支持大规模产品实验的A/B测试平台,之后陆续接入抖音、西瓜视频等全线业务,把A/B测试应用在产品命名、交互设计、推荐算法、用户增长、广告优化和市场活动等方方面面的决策上。
最新数据显示,字节跳动每天同时进行的A/B测试达到上万场,单日新增实验数量超过1500个,覆盖400多个大大小小的业务。随着公司发展,这些数字还在不断扩大。截至今年3月底,字节跳动累计已经做了70多万次A/B测试。
而当把A/B测试搬到火山引擎进行对外输出时,字节跳动也会对其进行相应的产品化改造。据火山引擎相关产品负责人介绍,火山引擎A/B测试可支持客户端、服务端、推送、网页、可视化建站等多种实验形式,操作非常简单,即使不会编程的人也能轻松做实验,而且有内容丰富的实验报表,可智能产出实验结论,让决策链变得更加清晰。
在字节跳动快速发展过程中,很多企业都好奇字节跳动的业务究竟是如何运作的,而现在,通过火山引擎,任何企业都可以使用和字节跳动相同的产品工具。
以悟空租车为例,该公司已通过火山引擎进行了70多次A/B测试,约有60%为正向实验,提升产品转换率约40%,以往需要一周时间的需求复盘数据分析,现在只要一天就能得到数据结论,并且更直观地量化了需求价值,极大地提升了效率。
务实的价值观
值得关注的是,在分享A/B测试工具时,杨震原还坦言,A/B测试也不是万能的,它有很多局限性,如果做A/B测试,短期内交易量肯定会降低,但长期来看结论有可能逐渐反转,这是长周期影响和目标设定的问题。
此外,独立的实验条件、统计置信度等问题都是做A/B测试需要考虑的。“所以,企业应充分意识到A/B测试的优势和缺陷,对目标选择适合的评估方法”,杨震原说,比如战略型决策,就需要专家角色进行长期的思考。
实际上,对于外界有观点把字节跳动称为“A/B测试公司”,字节跳动创始人张一鸣曾发微头条回应过,他当时表示,“同理心是地基,想象力是天空,中间是逻辑和工具。AB测试只是一个工具而已,是测不出用户需求的,同理心才是重要的基础。如果没有同理心,做出的产品肯定没有灵魂,不能满足用户需求。但是光有同理心还不够,这样只能做出有用的产品。想要做出彩的产品,想象力非常重要”。
务实与浪漫兼顾,是字节跳动的企业文化,当其开始转向to B时,它也希望把一些自身的方法论分享给企业客户,目的就是不过于神话产品的能力。
比如字节跳动就认为,数据驱动不是唯数据论,更不是数据至上。我们常说的数据驱动,不是有数据就可以驱动,而是需要对可以量化评估的目标,以A/B测试这样的结果数据才能更好地驱动,它代表的是科学决策的理念,不然数据驱动的决策也可能是很糟糕的决策。
与此同时,在大的战略层面,人的决策往往是决定性的,比如字节跳动决定做短视频,就不是靠A/B测出来的。
杨震原透露,抖音产品名字,其实是综合了A/B测试和人为判断的结果,“‘抖音’这个名字在测试结果中排名第二。但大家觉得,这个名字更符合认知,更能体现它的形态,所以还是选了它。”
过去几年,虽然字节跳动的C端产品增长迅猛,但它主要是通过抢占其他产品的用户市场,整个消费互联网的天花板已经显现。对字节跳动而言,B端市场或许会成为其未来的第二增长曲线。此前,阿里、腾讯等都已经验证了这条道路的正确性,只不过,字节跳动的入局,将使B端市场的竞争变得更加激烈。
关键词: