市值超 1.7 万亿的Netflix是如何做决策的？作者｜Netflix技术博客译者

作者｜Netflix技术博客
译者｜刘雅梦
策划｜凌敏
截至12月23日美股收盘，美国知名影视公司奈飞（Netflix）市值2720亿美元（约合17318.8亿元人民币）。据悉，奈飞是利用A/B测试做出决策，以不断对产品做出改进。
1
做决策很容易，难的是做正确的决策
奈飞的创作理念是将消费者的选择和控制放在娱乐体验的中心，作为一家公司，我们不断改善我们的产品，以改进这一价值主张。
例如，奈飞的用户界面（UI）在过去十年中经历了一次彻底的变革。早在2010年，用户界面是静态的，只有有限的导航选项，以及一个受视频租赁商店展示启发的演示。现在，用户界面是沉浸式的，具有视频转发功能，导航选项也更丰富且不那么突兀，盒子展位（boxart）展示更充分地利用了数字体验。

文章图片

文章图片
图1：奈飞TV用户界面（UI）在2010年（上）和2020年（下）展示效果。
从2010年的体验过渡到今天，奈飞需要做出无数的决策。比如，单个剧集的大显示区域与显示更多剧集之间的平衡是什么？视频比静态图片更好吗？我们如何在受限的网络上提供无缝的视频转发体验？我们如何选择要显示的剧集？导航菜单应该放在哪里，它们应该包含些什么？这样的例子不胜枚举。
做决策很容易——难的是做正确的决策。我们如何才能确信我们的决策能为我们现易会员提供更好的产品体验，并帮助新会员发展业务呢？奈飞可以通过多种方式来决策如何改进我们的产品，从而为我们的会员带来更多的乐趣：
让领导做所有的决策。
聘请一些设计、产品管理、用户体验、流媒体交付以及其他领域的专家，然后采用他们最好的想法。
进行内部辩论，让我们最有魅力的同事的观点占据上风。
模仿竞赛。

文章图片
图2：不同的决策方式。从左上角顺时针方向分别为：领导决策、内部专家决策、模仿竞赛、小组辩论。
在上面介绍的每种范式中，有助于决策的观点和视角都是有限的。领导小组很小，小组辩论的规模也就这么大，而奈飞在我们需要做出决策的每个领域中也都只有这么几位专家。也许有几十种流媒体或相关服务可以作为我们的灵感来源。此外，这些范例并没有提供一种系统化的方法来做出决策或解决相互冲突的观点。
在奈飞，我们相信有一种更好的方式能来决策如何改善我们向会员提供的体验：我们使用A/B测试。实验让我们所有的会员都有机会投票，用他们的行动来决策如何继续发展他们愉悦的奈飞体验，而不是由高管或专家组成的小组来做决策。
更广泛地说， A/B测试以及准实验（quasi-experimentation）等其他因果推理方法是奈飞使用科学方法为决策提供信息的方式。我们形成假设，收集经验数据，包括来自实验的数据，为我们的假设提供支持或反对的证据，然后得出结论并产生新的假设。
正如我的同事NirmalGovind所解释的那样，实验在支撑科学方法的推理（从一般原则中得出具体结论）和归纳（从具体的结果和观察中形成一般原则）的迭代循环过程中起着关键的作用。
2
A/B测试
A/B测试是一种简单的对照实验。比如说（这是一个假设！），我们想了解在电视用户界面中倒置所有盒子展位（boxart）的新产品体验是否对我们的会员有益。