Qiku ← Back to library

AI / Coding and Debugging

Metrics for Canary Comparison

Metrics for Canary Comparison — Chinese original prompt

我们准备用金丝雀发布 [服务名],新版本承接 [比例] 流量。请:1)列出要逐项对比的指标(错误率、延迟分位、资源占用、下游影响、业务转化);2)每项的对比口径与最小样本量,避免小流量误判;3)如何区分新版本问题和同期外部波动;4)给出继续放量、暂停、回滚的判定表;5)指出金丝雀阶段根本看不出的问题。
Site original

Chinese original

How to use

小流量下延迟分位抖动极大,先算样本量再下结论。

More in this topic