exp-sys-toy:一个简单的分层实验系统

实现一个简单的分层实验系统 前言 所谓一次实验（这里都是指网络实验），即是在一次请求中，应用几个参数，产生某种结果的过程。 而一组实验，即是在几个次请求（流量），进行若干次实验。 而各个对照实验，通常包括一个单独的实验（或控制组控制）和若干处理组实验（处理）。 所以，常见的实验，包括这样一些要素： 流量，其实就是样本 参数，通常是策略优化的对象 结果，映射到用户的行为，我们需分析的日志 当创建一个实验，我们一般会考虑这些问题： 起止时间，实验应该开启多连续，某些实验是否有替代，这是个权衡 流量大小，这个和我们关注的指标敏感度以及置信区间有关，这也是个权衡 分配方式（diversion），就是采样方式，按uuid，userid还是随机分配 分配条件（condition），只采用部分流量，可能按地域，按浏览器类型 流量换算，会和某些模块有交换关系，应该如何分配参数 针对这些问题，分散的实验常常