预测模型评估 · 实验自动生命周期
V1.24-P1-2 · 上:不看分数,看「是否赚钱」—— 预测购买 / 实际购买 / 准确率 / 误判率 + 净收益与盈亏平衡门槛。下:A/B 升级为增长实验平台,实验自动推进到「结论已出」后停住等人工上线。
三、是否赚钱 重点
3.1 盈亏平衡门槛(与样本量无关,现在就能用)
3.2 净收益结算
—
3.3 敏感性分析(提升率未知 → 扫描)
3.4 盲投对照(不建模型,全员无差别干预)
—
六、评估报告原文 PURCHASE_MODEL_REPORT.md
加载中…
该文件由服务端每日 03:20 自动重算并落盘 PURCHASE_MODEL_REPORT.md;此处为同一次请求的返回内容。
七、实验自动生命周期 自动到「结论已出」即停
| 实验 | 阶段 | 结论 | 胜出 | p 值 |
观察天数 | 成功率 A/B | 上线 |
| 加载中… |
—
等待人工确认上线(decided)
⛔ 系统绝不自动上线:decided → rolled_out 属人工专属转移。上线会改变真实用户看到的版本,必须人工拍板且留 actor。
最近状态转移留痕
V1.24-P1-3 · 实验状态(5 态)与自动报告 新
5 态:draft(草稿)/ running(运行中)/ analysis(分析中)/ winner(已出赢家)/ archived(已归档)。自动报告四段 = 实验目标 / 样本量 / 结果 / 建议。上线(decided→rolled_out)为人工专属,系统永不自动执行。
实验概览
| 实验 | 对外状态 | 内部状态 | 判定 | 样本进度 | 建议动作 |
| 加载中… |
自动报告(Markdown 全文)
加载中…
写入对外状态(不直达上线)