← 返回像火箭科学家一样思考
学习进度5 / 5

测试偏差

Testing Bias · RSK6.1 实践与测试

一句话定义

测试不是中立窗口,观察方式和测试人群都会改变结果。好测试要检查谁在看、谁在测、场景是否被扭曲。

机制 / 原理

设计测试时检查观察者效应样本偏差测试者差异。让多类测试者参与,减少单一观察者解释,把真实环境和实验环境的差距写下来。

测试偏差检查表偏差来源会扭曲什么修正动作观察者被测者更少说真话匿名或远程测试样本只看到同类用户纳入多类测试者场景实验环境不像真实使用复刻关键现场条件测试结果要连同测试设计一起解释。
测试偏差检查表:测试结果要连同测试设计一起解释。

经典实验 / 例子

原书讨论测试时提醒,测试者、观察者和被测试对象的互动会改变结果。被观察的人可能更谨慎,测试者的提示也可能改变行为。一次测试不是透明窗口,设计测试时要记录谁在看、谁在问、场景是否被扭曲。

书中案例出处
《像火箭科学家一样思考:将不可能变为可能》第7章 / 观察者效应;多位测试者

测试偏差:观察者和测试者都会改变结果

核心原文线索
测试偏差:观察者和测试者都会改变结果
案例现场复述

原书讨论测试时提醒,测试者、观察者和被测试对象的互动会改变结果。被观察的人可能更谨慎,测试者的提示也可能改变行为。一次测试不是透明窗口,设计测试时要记录谁在看、谁在问、场景是否被扭曲。

为什么重要

这个案例用于训练「测试偏差」:测试不是中立窗口,观察方式和测试人群都会改变结果。好测试要检查谁在看、谁在测、场景是否被扭曲。

生活中的例子

用户知道创始人在旁边看,可能更少批评产品,还会努力按“正确方式”操作。换成匿名远程测试,再让不熟悉产品的人独立完成任务,团队看到的卡点和抱怨会更接近真实使用。

常见误区

误区:只要做了测试,结果就是客观事实。 测试也有设计偏差。要审查测试如何影响了被测行为。

资料来源:Ozan Varol, Think Like a Rocket Scientist /《像火箭科学家一样思考:将不可能变为可能》课程内容为原创改写 · 实践与测试 · 第 RSK6.1
本讲解由 AI 依据该教材与主流学术观点撰写,非逐字引用,仅供学习参考。