لماذا يجب تجنب كابا كوهين كمقياس للأداء في التصنيف

نظهر أن كابا كوهين ومعامل ارتباط ماثيو (MCC)، وهما مقاسان موسعان ومتناقضان للأداء في التصنيف متعدد الفئات، مرتبطان في معظم الحالات، على الرغم من أنهما يمكن أن يختلفا في حالات أخرى. في الواقع، رغم أنه في الحالة المتماثلة يتطابقان، نعتبر حالات غير متوازنة مختلفة حيث يظهر كابا سلوكاً غير مرغوب فيه، أي أن مصنفاً أسوأ يحصل على درجة كابا أعلى، ما يختلف نوعياً عن MCC. تدور المناقشة حول عدم التوافق في سلوك كابا حول ملاءمة استخدام مقياس نسبي، مما يجعل تفسير قيمه صعباً. نقوم بتوسيع هذه المخاوف من خلال إظهار أن مصاعبها يمكن أن تمتد حتى أكثر. من خلال التجريب، نقدم نهجاً جديداً حول هذا الموضوع. نجري دراسة شاملة تحدد سيناريو يظهر فيه السلوك المتناقض بين MCC وكابا. على وجه التحديد، نجد أنه عندما يحدث انخفاض إلى الصفر في انتروبيا العناصر خارج القطر من مصفوفة الارتباك المرتبطة بمصنف، ترتفع الفجوة بين كابا وMCC، مما يشير إلى أداء غير طبيعي للأخير. نعتقد أن هذه النتيجة تعطل استخدام كابا بشكل عام كمقياس أداء للمقارنة بين المصنفات.