关键问题是“如果没有改变会怎样”
某学生采用新方法后分数提高,可能与方法有关,也可能因为考试更容易、复习时间更多或本来就逐渐熟练。只比较前后,无法单独排除这些变化。
因果问题会追问:在其他适当条件可比时,采用与不采用新方法的结果有何差别。同一个人在同一时刻无法同时处于两种状态,因此需要研究设计来构造可信的比较。
从“同时变化”走向“改变造成变化”
- 01观察
使用新方法者分数更高
- 02替代解释
基础、时间、试题难度不同
- 03因果问题
可比条件下,换方法会改变多少
把比较对象写清楚,才知道结论在回答什么。
好的对照让其他解释更难成立
一种办法是把可比对象随机分到不同安排中,再比较结果,尽量减少原本差异造成的干扰。但是否认真执行、有没有人员退出和怎样测量,仍然重要。
不能做随机比较时,也可通过仔细选择对照、分析已有记录等方式研究。关键是说明哪些条件可比,还有哪些解释没有排除,而不是只比较一个前后数字。
因果不必意味着每个人必然改变
一种方法可能改善平均表现,却并非对每个人都有同样效果。对象、使用方式、时间和比较方案不同,结论也可能不同。
因此好的因果表述会交代“对谁、做什么、与什么相比、在多久内”。相关性可以提出研究线索,时间先后可以约束解释,但它们各自都不足以独立完成因果证明。