評定者信頼係数（２人の場合）：どの点数を採用すべきでしょうか？

質問

お忙しいところ恐縮ですが、１つご教示頂きたいのですが、
２人の採点者が採点をしたライティングテストの点数間に、高い相関
があり（いわゆる、inter-rater reliabilityの相関が9.0以上あり、
その採点に信頼性がある場合）、「データとして採用する点数」は、

１）　２人の合計点
２）　２人の点数の平均点
３）　どちらか一方の採点者の点数

　の３つの内どれになるのでしょうか？

回答No.1

sanori

１か２になります。

なぜ３がダメかというと、一般に、あるデータの誤差（の得点に対する割合）というものは、データの個数が多ければ多いほど小さくなります。
１または２であれば、３に比べて誤差（の得点に対する割合）が１／√２　になります。

こういうイメージです。
１）　１００±１４　（１００±１４％）
２）　５０±７　　　（５０±１４％）
３）　５０±１０　　（５０±２０％）

お礼

明瞭な説明ありがとうございました。

　　　　　　　　　　　　　ＨＡＹＡＳＨＩＮＯＢ