Key points are not available for this paper at this time.
Resumo Contexto A avaliação confiável da competência é crucial para promover o desenvolvimento profissional dos terapeutas. No entanto, as avaliações de competência raramente são incluídas em treinamentos e pesquisas, pois esses procedimentos são intensivos em recursos e custosos, dependendo comummente de avaliadores independentes com altos níveis de experiência e treinamento extenso. Este estudo teve como objetivo comparar a confiabilidade entre avaliadores (IRR) com diferentes níveis de expertise. Também examinamos o impacto de diferentes perspectivas de câmera na IRR. Métodos Analisamos a IRR de seis avaliadores independentes com base em avaliações de competência em um ambiente padronizado. Dois avaliadores eram psicoterapeutas experientes (especialistas) e quatro eram estudantes de psicologia (novatos; com/sem supervisão). Todos os avaliadores avaliaram N = 359 vídeos de estudantes realizando encenações com pacientes padronizados que simulavam sintomas e comportamentos depressivos. Para cada vídeo, os avaliadores avaliaram de forma independente habilidades de comunicação básicas (Escala de Habilidades de Comunicação Clínica–Forma Curta; CCSS-S), competência psicoterapêutica (Escala de Terapia Cognitiva; CTS), empatia (Escala de Empatia; ES) e aliança terapêutica (Questionário de Aliança de Ajuda; HAQ). Resultados A IRR variou dependendo da expertise do avaliador e das medidas de avaliação, com os menores coeficientes de correlação intraclasse (ICCs) para empatia (ES; ICCs = 0,39-0,67) e os mais altos ICCs para competência psicoterapêutica (CTS; ICCs = 0,66-0,78). A concordância entre avaliadores especialistas e novatos supervisionados foi boa (ICCs = 0,71-0,86). A perspectiva da câmera não influenciou a confiabilidade das avaliações. Conclusões Com o treinamento adequado e supervisão regular, os novatos avaliaram o comportamento terapêutico em encenações padronizadas com confiabilidade comparável à dos especialistas. Mais pesquisas são necessárias sobre a avaliação confiável de situações terapêuticas mais complexas.
Paunov et al. (Quarta,) estudaram essa questão.