策略影响力小的线上AB实验,一些经验
  lWCPViTfHaj4 2023年11月02日 39 0


1,实验配置的历史记录一定要周全和完整,因为有时发现,已经可以看一个月的实验数据了。

2,一共十个桶,每个桶10%用户分流,实验组流量扩量,比如10%扩到20%,这时不要复用之前的10%的那个桶,因为策略效果(有可能)会随时间衰减,最好另开20%的2个桶。但综合考虑,这个待议,因为换桶则不方便观察长期到一个月的效果。

3,一个月的实验效果,确实稳定不少,比观察一周两周稳定,很能说明问题。可观测波动规律,一周有波动,一月有波动,观察一月可稳定,观察一周的话,这周可能处于一月内的波动里。

4,观察当前实验结果,是否处于波动周期的波谷或波峰。


【版权声明】本文内容来自摩杜云社区用户原创、第三方投稿、转载,内容版权归原作者所有。本网站的目的在于传递更多信息,不拥有版权,亦不承担相应法律责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@moduyun.com

  1. 分享:
最后一次编辑于 2023年11月08日 0

暂无评论

推荐阅读
lWCPViTfHaj4