임상 역량 평가에서 객관식 질문 및 환자 관리 문제 항목 형식의 신뢰도, 타당성 및 효율성

얼굴 타당성이 부족함에도 불구하고, 임상 역량의 객관적 종이 및 연필 측정에 계속해서 많은 의존성이 있습니다. 이러한 측정 중에서 가장 일반적인 항목 형식은 환자 관리 문제(PMPs)와 세 가지 유형의 객관식 질문(MCQs)입니다: 가장 좋은 답변(A형); 일치 질문(M형); 그리고 다수의 진위 질문(X형). 이 연구의 목적은 이러한 항목 형식의 신뢰도, 타당성 및 효율성을 비교하는 것이며, 특히 MCQs와 PMPs가 임상 역량의 다른 측면을 측정하는지에 초점을 맞추고 있습니다. 분석 결과 모든 항목 형식의 신뢰도가 0.72 이상으로 나타났으며, MCQ 형식이 가장 신뢰성이 높았습니다. 유사하게, 효율성 분석(테스트 시간 단위당 신뢰도)은 MCQs의 우수성을 입증했습니다. 프로그램 책임자의 평가 및 기준 그룹 소속과 항목 형식 점수 간의 상관을 통해 얻은 타당성 증거도 MCQs에 유리하게 작용했습니다. 그러나 더 중요한 것은 MCQs와 PMPs가 임상 역량의 동일한 측면 또는 다른 측면을 측정하는지 여부입니다. 타당성 측정의 점수에 대한 회귀 분석(프로그램 책임자의 평가 및 기준 그룹 소속)은 MCQs와 PMPs가 주로 같은 것을 측정하는 것으로 보인다고 나타냈습니다. MCQs는 PMPs를 초월한 작고 독특한 분산 구성 요소에 기여하는 반면, PMPs는 가장 작은 독특한 기여를 합니다. 전체적으로 이러한 결과는 MCQs가 PMPs보다 더 효율적이고 신뢰성이 있으며 타당하다는 것을 나타냅니다.