Kacam.net看開網

產品設計

这个实验能不能上线

一份「赢了」的实验报告摆在你面前,里面埋了四个坑。

複製提示詞,選一家接著聊 —— 它會當面試官逐幕問你,而不是把答案倒給你。

手機上裝了對應 App 的,系統會直接開 App。微信裡點不開外部 App,得先用瀏覽器打開。

複製走的那段末尾帶著判卷用的底牌,別自己先讀 —— 自己推出來過才算學到。

这一份的形式和别的不一样:它直接给你一份实验报告 —— p = 0.04,转化率相对提升 10%,结论建议全量上线 —— 然后问你批不批。

报告里埋了四个足以让结论完全反过来的问题,而它们都要你自己问出来:你不问样本量,它不会说;你不问护栏,它也不会说。

最后会问一句现实里一定会遇到的:老板说「橙色明显更好看,直接上吧」,你怎么回。 不接受「顶回去」,也不接受「那就上」。

★★★★★ · 約 40 分鐘 · 主考:样本量与 MDE、多重比较、新奇效应、被忽略的护栏

這一份主考什麼

實驗方法 證據與數字 指標設計

練過沒有

登入之後可以記下「這道題我練過」,下次回來看得到是哪天練的。

練過的人寫的心得

還沒有人寫。練完之後,說說你和模型聊出了什麼 —— 哪一幕被問住了,哪個結論你後來改了。

登入之後可以寫心得。

怎麼用

這批題沒有標準答案,但有明確的錯答。立得住的判據只有三條 —— 每一份的底牌裡都有一欄「常見的錯答」,比必答點更有用。

立得住的三條判據

  1. 你說得出這是誰的什麼問題,**而且有證據**(不是「我覺得使用者會想要」)
  2. 你說得出怎麼算成功,**而且那個數字現在是多少**(沒有基線就沒有驗收)
  3. 你說得出代價和你放棄了什麼 —— **這一條最難偽裝**,所以每一份都專門追它

怎麼開始

  1. 挑一道題,點開它,把提示詞複製走。
  2. 新開一個空對話貼進去 —— 別在聊過這道題的對話裡開。
  3. 什麼都別說,等它問第一個問題。

中途隨時能喊的四個口令

  • 跳过 立刻進下一幕
  • 提示 給一個方向,但不給答案
  • 直说吧 講這一點的完整答案,然後繼續追問代價
  • 复盘 立刻跳到收尾,輸出復盤卡片

三條坑

  • 別急著給方案。這批題一多半的失分點在「還沒問清楚就開始設計」——尤其是還沒定「怎麼算成功」就先講功能。
  • 準備好被追數字。「效果會更好」「使用者會喜歡」一律會被打斷,它要的是哪個指標、現在多少、多久看。
  • 它開始誇你的時候,提醒它看鐵律第五條 —— 被肯定的感覺會蓋掉「我漏了什麼」。

先做「北極星指標」,它是後面所有題的地基;然後按你眼下的事挑:需求排不動做「優先級」,沒人用或者留存在掉做「留存」和「新手引導」,要定價做「定價」。「實驗能不能上」留到後面,「把一句話需求寫成方案」最像日常工作,值得反覆做。