A/B测试翻车后的复盘会

4 阶段提问练习

1. O

   客观事实

   建立共识的事实基础。问「什么/谁/何时/具体」，不带评价

   学员（教练）此刻最想问对方什么的中文一句话提示：你作为教练，想引导小杨和张磊先对齐实验的客观数据，避免主观判断。

   • 9/10好选择

     「先别急着评价好坏，我们每个人把自己看到的实验核心数据说一遍，从点击率和观看时长开始，你觉得呢？」

     紧扣场景数据（点击率-12%、观看时长+20%），开放邀请双方陈述事实，不评价，为共识打底。

   • 5/10可以更稳

     「小杨，你来说说实验数据怎么样？张磊你觉得有问题吗？」

     虽然是在问数据，但『有问题吗』隐含了评价倾向，容易把对话引向对错争论。

   • 2/10试试别的

     「这个实验到底算成功还是失败？」

     直接问成败，跳过了事实阶段，逼迫对方立刻站队，容易触发防御和口水战。

   学员（教练）此刻最想问对方什么的中文一句话提示：你发现小杨和张磊对同一批数据的关注点不同，想帮他们看到差异。

   • 10/10好选择

     「小杨，你刚才提到了观看时长；张磊，你更关注点击率。你们各自看到的数字具体是多少？比如具体百分比和样本量。」

     具体到数字和样本量，引导双方把各自聚焦的数据摆出来，客观且不评判。

   • 4/10试试别的

     「你们俩是不是看的数据不一样？」

     带有猜测和质疑，容易让对方解释而非陈述事实。

   • 1/10试试别的

     「点击率低就是失败，这有什么好说的？」

     直接下结论，完全关闭了事实收集的通道，等于替对方做了判断。

   学员（教练）此刻最想问对方什么的中文一句话提示：你想帮他们梳理实验过程中还有哪些客观细节被忽略了。

   我注意到____，也想了解____。

   提示：我注意到实验上线时间是上周五，也想了解当时版本是否有其他改动同时发生？ · 我注意到点击率和观看时长走势图在第三天有个交叉点，也想了解那天的流量来源有没有异常？ · 我注意到对照组和实验组的用户画像分布比例，也想了解分桶时是否做了分层随机？

2. R

   感受反应

   释放情绪、识别共鸣。问「感觉/担心/印象/触动」，承接但不修复

   学员（教练）此刻最想问对方什么的中文一句话提示：你感到双方情绪都上来了，想先承接感受，而不是讲道理。

   • 9/10好选择

     「听到这个结果，你们第一反应是什么？小杨你先说，张磊你听完再补充。」

     直接邀请表达情绪，轮流发言避免打断，为情绪释放创造安全空间。

   • 3/10试试别的

     「别激动，数据就是这样，咱们理性分析。」

     否定情绪，要求对方『理性』，反而会让情绪积压或转入隐性对抗。

   • 5/10可以更稳

     「张磊你是不是觉得这个实验白做了？」

     尝试共情但带了预设（『白做了』），可能引发对方反驳而不是真实感受。

   学员（教练）此刻最想问对方什么的中文一句话提示：小杨表现出委屈，张磊表现出挫败，你想让他们各自说出内心的真实感受。

   • 8/10好选择

     「小杨，你刚才皱眉了，是不是觉得自己的分析没被重视？张磊，你反复强调『失败』，是不是有点失望？」

     观察到非语言信号并温和地命名感受，邀请双方自我确认，但注意语气不带指责。

   • 2/10试试别的

     「你们俩都别往心里去，工作嘛，对事不对人。」

     典型的『安抚式否定』，回避了真实情绪，无法帮助对方释放。

   • 1/10试试别的

     「你觉得张磊是不是在针对你？」

     直接挑拨关系，把工作分歧引向人际冲突，完全违背R阶段承接情绪的目标。

   学员（教练）此刻最想问对方什么的中文一句话提示：你注意到张磊很在意『失败』这个词，想帮他觉察这个情绪背后的根源。

   你刚刚用了____这个词，听起来____，能多说一点吗？

   提示：你刚刚用了『失败』这个词，听起来很沉重，能多说一点吗？ · 你刚刚用了『浪费』这个词，听起来很心疼时间，能多说一点吗？ · 你刚刚用了『又』字，听起来不是第一次有这种感觉，能多说一点吗？

3. I

   诠释意义

   挖掘洞察与可选项。问「为什么/意味着/有哪些方案/选 A 还是 B」

   学员（教练）此刻最想问对方什么的中文一句话提示：你们已经谈过感受，现在需要挖掘数据背后的意义和可能性。

   • 10/10好选择

     「如果观看时长提升20%不是偶然，你们觉得它可能意味着用户在使用体验上发生了什么变化？」

     提出一个积极的假设，邀请双方探索可能性，而不是固守在『失败』框架里。

   • 3/10试试别的

     「那这个20%会不会是虚高？毕竟点击率降了。」

     立刻质疑数据有效性，关闭了诠释空间，容易回到对错争论。

   • 1/10试试别的

     「我们能不能折中一下，取个平均值交差？」

     跳到了D阶段的妥协方案，完全跳过了意义挖掘，且方案本身无依据。

   学员（教练）此刻最想问对方什么的中文一句话提示：张磊坚持『点击率低=失败』，你想帮他看到一个更完整的评估维度。

   • 9/10好选择

     「张磊，你之前做产品时，有没有遇到过某个短期指标下降但长期指标反而变好的情况？」

     用对方过去的经验启发类比，让他自己发现『失败』可能只是一个片面的视角。

   • 2/10试试别的

     「你太看重点击率了，其实观看时长才是核心。」

     直接否定对方的指标，容易激起防御，而不是启发思考。

   • 1/10试试别的

     「要不我们问问总监怎么看？」

     逃避对话，违背了『不得找总监仲裁』的约束，且跳过了I阶段的深层探索。

   学员（教练）此刻最想问对方什么的中文一句话提示：你注意到双方开始对『用户行为』有不同解读，想引导他们从用户视角思考。

   如果我们是用户，面对新旧两种推荐，____和____，我们的____会有什么不同？

   提示：如果我们是用户，面对新旧两种推荐，点击少了但看得更久，我们的使用体验会有什么不同？ · 如果我们是用户，面对新旧两种推荐，一个是『更多选择』一个是『更精准』，我们的满意度会有什么不同？ · 如果我们是用户，面对新旧两种推荐，我们愿意在哪个上面花更多时间？

4. D

   行动决定

   落地承诺。问「做什么/谁负责/什么时候/怎么验收」

   学员（教练）此刻最想问对方什么的中文一句话提示：你们已经理解了数据背后的可能意义，现在需要落定一个双方都能签字的下一步行动。

   • 10/10好选择

     「既然观看时长这个信号值得深挖，我们能不能保留实验组，再追加一周观察留存率？同时设计一个补充实验专门验证观看时长。小杨你来负责数据方案，张磊你来定评估标准，可以吗？」

     具体方案（保留+追加一周+补充实验），明确分工（小杨出方案、张磊定标准），紧扣理性目标，且给了双方参与感和面子。

   • 3/10试试别的

     「那我们就再看看吧，过一周再说。」

     过于模糊，没有具体owner、没有checkpoint，容易不了了之，且没有解决『给出明确说法』的刚性约束。

   • 1/10试试别的

     「要不就下线吧，别浪费大家时间了。」

     直接放弃探索，违背了理性目标，且让小杨的专业判断被完全否定，感性目标落空。

   学员（教练）此刻最想问对方什么的中文一句话提示：双方已经同意追加观察，但你需要确保行动方案有明确的交付和时间节点。

   • 9/10好选择

     「好，那我们确认一下：小杨，你下周三前能给出留存率和补充实验的设计初稿吗？张磊，你在这周内确认评估标准，下周五咱们再碰一次，签字确认下一步。」

     明确的时间节点和交付物（下周三初稿、下周五碰头），双方各自承担可验证的任务，符合约束中的『签字确认』。

   • 2/10试试别的

     「那你们自己商量吧，商量好了告诉我。」

     教练放弃引导责任，不符合『1小时内给出明确结论』的约束，且容易让双方回到争执状态。

   • 1/10试试别的

     「你们俩握个手，这事就过去了。」

     用形式主义代替实质性行动方案，完全无法满足理性目标。

   学员（教练）此刻最想问对方什么的中文一句话提示：你希望双方在签字前，各自承诺一个具体的支持行为，确保后续执行不落空。

   为了确保这个方案能落地，你愿意____（具体行为），并在____（时间点）之前完成？

   提示：为了确保这个方案能落地，你愿意在周五前拉一个包含留存率看板的邮件，并在下周三之前完成？ · 为了确保这个方案能落地，你愿意在下周一前定好补充实验的假设和指标，并在下周四之前同步给团队？ · 为了确保这个方案能落地，你愿意每天花10分钟看一下数据趋势，并在发现异常时24小时内通知对方？