Kacam.net

Design produit

这个实验能不能上线

一份「赢了」的实验报告摆在你面前,里面埋了四个坑。

Copiez la consigne, puis choisissez un modèle. Il joue l'examinateur et vous interroge acte par acte au lieu de vous donner la réponse.

Sur un téléphone où l'application est installée, le système l'ouvre directement. Dans WeChat, les liens n'ouvrent pas les applications externes : ouvrez-le d'abord dans un navigateur.

Le texte copié se termine par le corrigé dont le modèle se sert pour vous évaluer. Ne le lisez pas avant : ce qui compte, c'est de l'avoir déduit vous-même.

这一份的形式和别的不一样:它直接给你一份实验报告 —— p = 0.04,转化率相对提升 10%,结论建议全量上线 —— 然后问你批不批。

报告里埋了四个足以让结论完全反过来的问题,而它们都要你自己问出来:你不问样本量,它不会说;你不问护栏,它也不会说。

最后会问一句现实里一定会遇到的:老板说「橙色明显更好看,直接上吧」,你怎么回。 不接受「顶回去」,也不接受「那就上」。

★★★★★ · environ 40 min · Ce qui est évalué : 样本量与 MDE、多重比较、新奇效应、被忽略的护栏

Ce que celle-ci évalue

Méthode expérimentale Preuves et chiffres Conception des métriques

Déjà fait celui-ci ?

Connectez-vous pour noter que vous l'avez fait : la prochaine fois, vous verrez quel jour c'était.

Notes de ceux qui l'ont fait

Personne n'a encore écrit. Une fois terminé, racontez ce qui est sorti de l'échange : quel acte vous a bloqué, quelle conclusion vous avez changée ensuite.

Se connecter pour écrire une note.

Comment s'en servir

Il n'y a pas de réponse modèle, mais il y a des réponses clairement fausses. Trois choses seulement font tenir un dossier — et chaque corrigé contient une rubrique « erreurs fréquentes » plus utile que la liste des points attendus.

Les trois conditions pour que ça tienne

  1. Vous savez dire de qui et de quel problème il s'agit, **avec des preuves** (pas « je pense que les utilisateurs voudraient »)
  2. Vous savez dire à quoi ressemble le succès, **et combien vaut ce chiffre aujourd'hui** (sans référence, pas de recette)
  3. Vous savez nommer le coût et ce que vous abandonnez — **la plus difficile à simuler**, donc chaque fiche la traque

Comment démarrer

  1. Choisissez-en une, ouvrez-la, copiez l'invite.
  2. Collez-la dans une conversation toute neuve — pas une où vous en avez déjà parlé.
  3. Ne dites rien. Attendez sa première question.

Quatre commandes à lancer à tout moment

  • 跳过 passer tout de suite à la scène suivante
  • 提示 une direction, pas la réponse
  • 直说吧 développer complètement ce point, puis continuer à creuser les coûts
  • 复盘 sauter à la conclusion et sortir la fiche de bilan

Trois pièges

  • Ne foncez pas sur la solution. Plus de la moitié des points perdus ici viennent de « concevoir avant d'avoir demandé » — surtout décrire des fonctionnalités avant d'avoir défini le succès.
  • Préparez-vous à devoir chiffrer. « Ça marchera mieux », « les utilisateurs vont aimer » seront coupés : quelle métrique, combien aujourd'hui, à quelle échéance ?
  • Quand elle se met à vous complimenter, renvoyez-la à la règle cinq — se sentir validé fait oublier ce qu'on a manqué.

Commencez par l'étoile polaire : elle porte tout le reste. Ensuite, choisissez selon votre actualité : un backlog impossible à ordonner → la priorisation ; personne n'utilise / la rétention baisse → rétention et prise en main ; il faut fixer un prix → le pricing. Gardez la revue d'expérience pour plus tard, et refaites souvent celle qui transforme une demande d'une ligne en spécification : c'est la plus proche du quotidien.