字节跳动首次揭秘A/B测试：做了70多万场实验，开放给企业客户

在4月20日召开的火山引擎技术开放日活动中，字节跳动副总裁、算法和数据技术负责人杨震原首次揭秘了字节跳动如何使用A/B测试。火山引擎是字节跳动旗下为企业服务的智能科技品牌，字节跳动的A/B测试工具也已通过火山引擎开放给企业客户。A/B测试是指对不同策略进行对比实验，根据结果选择最优方案。A/B测试不是互联网公司发明的，而是最早应用在医学领域。十八世纪，一位英国医生把患有坏血病的水手随机分成六组，用不同方法进行治疗，从而确定了柠檬和橘子能有效治疗坏血病，这是人类有记载最早的A/B测试。在互联网时代，A/B测试被谷歌等巨头广泛使用在产品开发和运营中，有研究者也把A/B测试视为字节跳动快速增长的重要因素。据杨震原介绍，公司成立之初，今日头条就在做策略推荐类的A/B测试。2016年，字节跳动建立了支持大规模产品实验的A/B测试平台，之后陆续接入抖音、西瓜视频等全线业务，把A/B测试应用在产品命名、交互设计、推荐算法、用户增长、广告优化和市场活动等方方面面的决策上。