这个实验能不能上线
一份「赢了」的实验报告摆在你面前,里面埋了四个坑。
复制提示词,选一家接着聊 —— 它会当面试官逐幕问你,而不是把答案倒给你。
手机上装了对应 App 的,系统会直接开 App。微信里点不开外部 App,得先用浏览器打开。
复制走的那段末尾带着判卷用的底牌,别自己先读 —— 自己推出来过才算学到。
这一份的形式和别的不一样:它直接给你一份实验报告 —— p = 0.04,转化率相对提升 10%,结论建议全量上线 —— 然后问你批不批。
报告里埋了四个足以让结论完全反过来的问题,而它们都要你自己问出来:你不问样本量,它不会说;你不问护栏,它也不会说。
最后会问一句现实里一定会遇到的:老板说「橙色明显更好看,直接上吧」,你怎么回。 不接受「顶回去」,也不接受「那就上」。
这一份主考什么
实验方法
证据与数字
指标设计
这一份的正文在仓库里 (末尾就是底牌,点进去会看见)
练过没有
登录之后可以记下「这道题我练过」,下次回来看得到是哪天练的。
练过的人写的心得
还没有人写。练完之后,说说你和模型聊出了什么 —— 哪一幕被问住了,哪个结论你后来改了。
怎么用
这批题没有标准答案,但有明确的错答。立得住的判据只有三条 —— 每一份的底牌里都有一栏「常见的错答」,比必答点更有用。
立得住的三条判据
- 你说得出这是谁的什么问题,**而且有证据**(不是「我觉得用户会想要」)
- 你说得出怎么算成功,**而且那个数字现在是多少**(没有基线就没有验收)
- 你说得出代价和你放弃了什么 —— **这一条最难伪装**,所以每一份都专门追它
怎么开始
- 挑一道题,点开它,把提示词复制走。
- 新开一个空对话贴进去 —— 别在聊过这道题的对话里开。
- 什么都别说,等它问第一个问题。
中途随时能喊的四个口令
跳过立刻进下一幕提示给一个方向,但不给答案直说吧讲这一点的完整答案,然后继续追问代价复盘立刻跳到收尾,输出复盘卡片
三条坑
- 别急着给方案。这批题一多半的失分点在「还没问清楚就开始设计」——尤其是还没定「怎么算成功」就先讲功能。
- 准备好被追数字。「效果会更好」「用户会喜欢」一律会被打断,它要的是哪个指标、现在多少、多久看。
- 它开始夸你的时候,提醒它看铁律第五条 —— 被肯定的感觉会盖掉「我漏了什么」。
先做「北极星指标」,它是后面所有题的地基;然后按你眼下的事挑:需求排不动做「优先级」,没人用或者留存在掉做「留存」和「新手引导」,要定价做「定价」。「实验能不能上」留到后面,「把一句话需求写成方案」最像日常工作,值得反复做。
登录之后可以写心得。