AI / 分析与决策
主指标好看但退款投诉也在涨,先分清是短期副作用还是真损害
实验组 [主指标] 涨了 [比例],但 [护栏指标,例如退款率或投诉率] 也涨了。请判断这是短期副作用还是真实损害:看护栏指标是否随时间持续、是否集中在某个分群、是否与主指标增长同源;给出三种取舍方案,并说明各自还需要补什么数据才能定案。
中文原文
主指标好看护栏失守,上线后往往要花两个月擦屁股。