Analyzing the Validity and Reliability of Course Evaluations to Improve Educational Quality: A Case Study of University A

본 연구는 대학교육의 질 관리 도구로서 강의평가 체제의 중요성에 기초하여 A대학의 강의평가 체제를 분석하고 문제점을 해결할 수 있는 개선 방안을 도출하고자 하는 목적으로 수행되었다. 강의평가의 목적인 대학교육의 질적 향상을 달성하기 위해서는 강의평가 측정 도구뿐만 아니라 강의평가를 둘러싼 정책 전반의 타당성에 대해서 검토하는 과정이 필수적이다. 연구 목적을 달성하기 위하여 A대학의 2021년부터 2023년까지의 중간·기말 강의평가 응답 데이터를 활용하여 강의평가의 타당도(내용, 내적구조, 검사결과에 기초한 근거), 신뢰도를 검증하였고, 검증 결과를 바탕으로 A대학 강의평가 문항 및 체제 개선안을 도출하였다. 연구 결과, 검사 내용에 대한 근거로서 전문가 델파이 조사에 따라 강의평가 문항 개선의 필요성에 대한 공감대가 형성되었고, 공통적으로 부적절하다고 평가된 문항 및 측정 구인이 도출되었다. 내적구조에 대한 근거로서 중간 및 기말 강의평가 확인적 요인분석 결과, 기말 강의평가 1번 문항을 제외한 모든 문항은 양호한 표준화 요인부하량을 나타냈다. 검사결과에 대한 근거로서 교원별 점수 하위 5% 추출 결과와 무성의 응답 현황을 도출하였다. 마지막으로 신뢰도를 검증한 결과, 높은 신뢰도 지수가 나타났다. 이와 같은 연구 결과를 반영하여 측정 구인 및 문항 타당성 측면, 중간 및 기말 강의평가 문항 통일 측면, 강의평가 결과 활용 측면, 무성의 응답 해결 측면에서 A대학 강의평가 체제 개선안과 장기적 관점에서의 향후 과제를 도출하고 논의하였다.