AI / Analysis & Decision Making

Too Many Metrics, Too Many Wins

Too Many Metrics, Too Many Wins — Chinese original prompt

一次实验我同时看了 [数量] 个指标，其中 [数量2] 个显著。请说明多重比较下这种结果有多少是碰巧，给出校正方法例如 Bonferroni 或 FDR 以及校正后的结论；并帮我定一个规矩：以后实验预先指定几个主指标，其余只作探索，写清报告里怎么标注。