観察データにおける評価者間信頼性の計算：概要とチュートリアル

多くの研究デザインは、複数のコーダーによって提供された観察評価の一貫性を示すために、評価者間信頼性（IRR）の評価を必要とします。しかし、多くの研究では不正確な統計手法を使用したり、結果を解釈するために必要な情報を完全に報告しなかったり、IRRが仮説検定のその後の分析の力にどのように影響するかに言及しなかったりします。この論文では、研究デザイン、適切な統計の選択、および一般的に使用されるIRR統計の計算、解釈、報告に焦点を当てたIRR評価に関連する方法論的問題の概要を提供します。計算の例には、IRRを評価するためのコーエンのカッパとクラス内相関を計算するためのSPSSおよびRの構文が含まれます。