一句话定义
测试不是中立窗口,观察方式和测试人群都会改变结果。好测试要检查谁在看、谁在测、场景是否被扭曲。
机制 / 原理
设计测试时检查观察者效应、样本偏差和测试者差异。让多类测试者参与,减少单一观察者解释,把真实环境和实验环境的差距写下来。
经典实验 / 例子
原书讨论测试时提醒,测试者、观察者和被测试对象的互动会改变结果。被观察的人可能更谨慎,测试者的提示也可能改变行为。一次测试不是透明窗口,设计测试时要记录谁在看、谁在问、场景是否被扭曲。
书中案例出处
测试偏差:观察者和测试者都会改变结果
核心原文线索
测试偏差:观察者和测试者都会改变结果
案例现场复述
原书讨论测试时提醒,测试者、观察者和被测试对象的互动会改变结果。被观察的人可能更谨慎,测试者的提示也可能改变行为。一次测试不是透明窗口,设计测试时要记录谁在看、谁在问、场景是否被扭曲。
为什么重要
这个案例用于训练「测试偏差」:测试不是中立窗口,观察方式和测试人群都会改变结果。好测试要检查谁在看、谁在测、场景是否被扭曲。
生活中的例子
用户知道创始人在旁边看,可能更少批评产品,还会努力按“正确方式”操作。换成匿名远程测试,再让不熟悉产品的人独立完成任务,团队看到的卡点和抱怨会更接近真实使用。
常见误区
误区:只要做了测试,结果就是客观事实。 测试也有设计偏差。要审查测试如何影响了被测行为。