什麼是AB測試？

通俗點理解，AB測試就是比較兩個東西好壞的一套方法，這種A和B的比較在我們的生活和人生中非常常見，所以不難理解。具體到AB測試這個概念，它和我們比較哪個梨更大、比較哪個美女更漂亮、比較哪個工作更好之間有什麼區別嗎？ 區別其實非常明顯，從以下幾個方面不難看出來：

• 領域不同：AB測試的概念是在網際網路中被提出來的，所以它有特定的應用領域。
• 標準不同：AB測試需要比較產品的兩個不同版本之間的優劣，但是評判要交給使用者，不像我們生活中遇到的AB比較，基本都可以“自己拿主意”。

正是因為標準在“使用者爸爸”那裡，所以這個看起來很簡單的AB比較就變得異常複雜。在我這個理科男眼裡，凡是跟人有關的東西都更復雜，何況和千千萬萬人有關的產品。因此，為了比較A和B兩個不同版本產品的優劣，AB測試這一套系統的方法被髮明出來了。

上圖是AB測試的一個直觀解釋。我們會隨機給不同的人群提供兩個不同版本的產品，然後通過收集使用者反饋的資料進行統計分析，決定出哪個版本的產品更好。相信我們每個人都當過AB測試的小白鼠，細心的你不難在使用微信、抖音、高德、美團這些APP時發現一些端倪。

維基百科上給AB測試下了一個定義：

A/B testing is a way to compare two versions of a single variable, typically by testing a subject's response to variant A against variant B, and determining which of the two variants is more effective.

在我看來這跟啥也沒說差不多，就是我上面“通俗理解”的翻譯版本。AB測試屬於那種一聽就懂，一看就明白，一做就抓瞎的事。所以定義和概念不重要，實踐才重要。幸運的是，前輩們已經幫我們總結了非常多的經驗教訓，而我作為知識的搬磚工，將會用幾篇文章來和大家一起從零開始學習AB測試。

• 網際網路公民第一守則：不要重複造輪子。
• 網際網路公民第二守則：參照上一條。

為什麼要做AB測試？

AB測試雖然思想簡單但是非常有效，看了如下的幾個好處你就明白為什麼一定要做AB測試了：

• 如果我們人工針對部分使用者做調研，很難消除一些外部因素的影響，比如交通、天氣、節日，而AB測試可以通過隨機分配和對照的方式，有效消除這些影響。
• 如果我們聽取專家或研究機構的建議，眾所周知，他們很可能出錯。使用者行為是個很複雜的事，具有潛在性，很多時候使用者自己都不知道自己怎麼想的，想要什麼。
• 讓資料說話，而不是聽老闆的