80小说网

手机浏览器扫描二维码访问

第7章 字母B与数字13（第4页）

我开始怀疑我的评分产生了光环效应，即第一次评分对接下来的所有评分都产生了一定影响。

这样的机制十分简单：在我给某学生的第一份论文打了高分后，再碰到有模糊或是有歧义的陈述时都会对这个学生手下留情。

这种做法看似合理。

一个学生能将第一份论文写好的话，就不应在第二份论文中犯低级错误！

但我评分的方法却存在一个严重的问题。

如果某个学生写了两份论文，一份论点有力，另一份却经不起推敲，我则会因为批改的顺序不同而给出不同的分数。

我曾经告诉学生两份论文的评分标准是一样的，但事实却并非如此：相比第二份论文来说，第一份论文对于总分的影响更大。

所以这样的做法是不可取的。

我采取了一种新的做法。

我阅读并批改了某个学生第一个问题的答案，然后接着改下一个学生的相关论述，而不是按顺序读完第一个学生的整本论文才评阅下一份。

我确定将所有分数都写在了论文集的封底，以避免在批改第二份论文时出现偏见（即使是无意识的）。

在改变方法后不久，出现了一个令人担忧的结果：我对评分的自信程度比原来更低了。

原因在于我频繁地感到一种不适。

当我对某个学生的第二份论文感到失望时，便在他的论文集封底记下一个低分，但却偶然发现我给他的第一份论文打了最高分。

我也注意到了我会不经意地改变尚未写下来的分数以缩小两份论文之间的分数差，并且，我很难克制住自己不这样做。

我对同一个学生的论文评分通常相差巨大。

这样的前后不一使我感到不确定和沮丧。

我现在对自己的评分行为感到失望和不自信，但我认为这是件好事，因为它表明现在这个方法比原来的有进步。

我先前所感到的一致性是伪造出来的，它使我有了认知放松之感，我的系统2也欣然接受了最后的分数。

采用新方法之后，虽然第一个问题深深影响到我对之后学生的评估，但我允许自己这样做，因而学生某些问题答得好和不好的分数差别也就不是我有意为之的了。

但我发现同一个学生在回答一个问题时表现优异，而对另一个问题的解答却很糟糕。

当我改变方法时，这种令人感到不适的前后不一致就显露了出来：它不仅反映出随便拿一个问题去衡量学生水平的做法是不恰当的，还反映出我自己打出的分数同样不可靠。

我采取的避免光环效应的评卷方法遵循了一个普遍原则：消除错误的关联！

为了了解这一原则的工作原理，我们设想一下：向大量观察者展示一些装有硬币的玻璃罐，让他们估计一下每一个罐里硬币的数量。

詹姆斯·索罗维基（JamesSurowiecki）在他最为畅销的著作《群体的智慧》（TheWisdomofCrowds）一书中解释道，一个人单独完成这个任务的效果并不理想，但一群人共同作出判断时准确率就很高。

有些人高估了硬币的数量，另一些人低估了它，但对所有判断进行平均估算得出的平均值就会趋近于准确值。

这种机制很容易理解：每个人都观察着同一个玻璃罐，他们的判断都基于一个共同的基础。

另一方面，每个人犯的错误都与其他人的错误无关，（在没有系统性偏见的情况下）这些错误的平均值趋近于零。

然而，只有在每个人的观察相互独立、每个人所犯错误之间不相关联的情况下，降低错误率的奇迹才能出现。

如果观察者持有相同偏见，就算将他们的判断汇总起来也难以降低错误率。

允许不同观察者之间相互影响会减少样本量，进而影响小组估值的准确率。

想要从大量证据来源中获取最有用的信息，你应设法使这些来源相互独立。

这也是警察办案时所遵循的规则。

如果某个案件有多个目击证人，在录口供之前，这些证人是不能获准讨论案件的。

这样做不仅是为了防止不怀好意的证人相互串通，还避免了没有偏见的证人相互影响。

交流过各自目击过程的证人容易在证词中犯相似的错误，降低了他们所提供信息的总体价值。

减少信息来源中的冗赘信息总是没错的。

企业高管需要花大量时间主持会议，独立判断原则（及解除错误关联）可以直接应用到这些工作中。

一条简单的规则就能发挥作用：在开始讨论某个问题之前，先让与会的每一位成员各自写下简短的意见阐明自己的观点。

这个过程很好地利用了小组里不同知识和见解的价值。