推荐系统：AB测试（AB Test）

AB测试的价值不止体现在推荐系统中，它在整个互联网产品迭代周期中得到了广泛深入的应用。本文试图对AB测试做一个比较全面的介绍，会从以下9个方面来讲解AB测试技术。：

• 什么是AB测试、
• AB测试的价值、
• 什么时候需要AB测试、
• AB测试的应用场景、
• AB测试平台核心模块、
• 业界AB测试的架构实现方案、
• 推荐系统业务AB测试实现方案、
• 构建AB测试需要的资源及支持、
• 构建AB测试需要关注的问题

一、什么是AB测试

AB测试的本质是分离式组间试验，也叫对照试验，在科研领域中已被广泛应用（它是药物测试的最高标准）。自2000年谷歌工程师将这一方法应用在互联网产品以来，AB测试越来越普及，已逐渐成为衡量互联网产品运营精细度的重要体现。简单来说，AB测试在产品优化中的应用方法是：在产品正式迭代发版之前，为同一个目标制定两个（或以上）可行方案，将用户流量分成几组，在保证每组流量在控制特征不同而其他特征相同的前提下，让用户分别看到不同的方案设计，根据几组用户的真实数据反馈，科学地帮助产品进行决策(比如你想优化某个位置的文案颜色，觉得蓝色比红色好，就可以保持这个位置一组流量的文案红色，一组蓝色，其他都相同，进行AB测试)。AB测试原理如下面图1。

---

---

---

参考资料：
推荐系统系列20：AB测试平台的工程实现
「构建企业级推荐系统」AB测试第二讲：业界流行的AB测试框架实现方案
推荐系统之必备要素-ABtest框架
推荐系统衡量：ABtest 框架