diff --git a/overlapping-experiment-infrastructure-more-better-faster-experimentation/README.md b/overlapping-experiment-infrastructure-more-better-faster-experimentation/README.md index 608c8e3..d84275c 100644 --- a/overlapping-experiment-infrastructure-more-better-faster-experimentation/README.md +++ b/overlapping-experiment-infrastructure-more-better-faster-experimentation/README.md @@ -3,7 +3,7 @@ # 重叠实验设施:更多、更好、更快地实验 - + @@ -94,7 +94,7 @@ * 简单地将参数分为三层(图2a),这种情况下,每个请求最多只会同时在三个实验中,每层一个,每个实验只能修改相应层的参数。 * 我们可以先将流量分为两个域,一个域只有一个单一层(非重叠域),和一个有三个层的重叠域(见图2b),在这种情况下,每个请求会分到非重叠域或是重叠域。请求只能在非重叠域或重叠域其中之一。如果请求在重叠域,那么请求最多在一个实验中(这个实验可以改变参数集合中的任意参数的值),如果请求在重叠域,那么请求最多在三个实验中,每层一个实验。并且对于每个实验,只能使用对应层的参数。 - + **图2**:重叠分层示意图 @@ -170,7 +170,7 @@ _Kohavi_ 假设实验与对照实验有相同的大小,比如 1/\sqrt{N} 的关系,图中的斜线即是 s ,坐标轴上的值出于保密的原因隐去了,但可以看出`cookie`取模的斜线比查询的斜线陡峭,比如在相同的准确度下衡量相同的覆盖率的变化,一个`cookie`取模的实验需要比随机流量实验大的规模。 - + **图4**:在分配类型下计算覆盖度 s 的斜线 @@ -238,7 +238,7 @@ _Kohavi_ 假设实验与对照实验有相同的大小,比如 + **图5**:实验,拥有者,发布数量在时间上的趋势图 ## 6.2 更好