Brooke Cagle在Unsplash上​​拍摄的照片

您正在阅读Designer和Metrics系列中的第三篇文章。在第一，我们认为是否一个产品设计师需要的指标，并在第二，我们看什么指标有。如果您还没有阅读这些文章，我建议从它们开始。

本文将讨论如何回答我们是否改进了产品的问题。

发布后的天数

: ? ?

, , . — .

, : , , — , , , .

— , .

«» «»

— R (), — , — Z ().

, , R ≠ Z.

, , , . — .

, , , , R.

, , — , 300 ( ), .

Z, . , , Z ≠ R.

?

. , R.

. , 300 , 5 , , 1,7%.

, R. :

1. — 1.7%
2. , — 300
3. ( ) — — 146 .
4. , . 90, 95 99%

«».

, R 90, 95 99% ( , ).

, , R ( ) 0% 3,59% .

, , 0 5 268 274 . ( — 2,6 ).

, .

- «» «»

, . : «» «» , .

, , - .

, , , - . .

, 2 , 5 000 . CTR 2% ( ), 3%. , ?

, :

:

1. — 2%
2. — 5 000
4. 95%

, R 95% [ 1,61% – 2,39% ]

( 5 000 ) [ 2,53% – 3,47% ]

, , , .

1. , , .
2. .
3. 如果置信区间“之前”和“之后”不相交，则意味着设计师的工作肯定得到了肯定的结果。

下一步是什么

这是Designer and Metrics系列中的第三篇也是最后一篇文章。

在下一篇文章中，我计划告诉您为什么不应该询问用户他喜欢什么以及他不喜欢什么。订阅不要错过！