Sistemas para clasificar la calidad de la evidencia y la fuerza de las recomendaciones II: Estudio piloto de un nuevo sistema

ANTECEDENTES: Los sistemas que utilizan diferentes organizaciones para clasificar la calidad de la evidencia y la fuerza de las recomendaciones varían. Tienen diferentes fortalezas y debilidades. El Grupo de Trabajo GRADE ha desarrollado un enfoque que aborda las deficiencias clave en estos sistemas. El objetivo de este estudio fue probar y desarrollar más el enfoque GRADE para clasificar la evidencia y las recomendaciones. MÉTODOS: Un perfil de evidencia GRADE consta de dos tablas: una evaluación de calidad y un resumen de hallazgos. Se utilizaron doce perfiles de evidencia en este estudio piloto. Cada perfil de evidencia se realizó basado en la información disponible en una revisión sistemática. Diecisiete personas recibieron instrucciones y clasificaron de manera independiente el nivel de evidencia y la fuerza de la recomendación para cada uno de los 12 perfiles de evidencia. Para cada ejemplo, se recopilaron, resumieron y discutieron los juicios en el grupo con el objetivo de mejorar el sistema de clasificación propuesto. Se calcularon coeficientes Kappa como medida de acuerdo corregido por azar para la calidad de la evidencia para cada resultado de cada uno de los doce perfiles de evidencia. También se preguntó a los diecisiete jueces acerca de la facilidad de comprensión y la sensatez del enfoque. Todos los juicios fueron registrados y se discutieron los desacuerdos. RESULTADOS: Hubo una cantidad variada de acuerdo sobre la calidad de la evidencia para los resultados relacionados con cada una de las doce preguntas (los coeficientes kappa para el acuerdo más allá del azar variaron de 0 a 0.82). Sin embargo, hubo un acuerdo justo sobre la importancia relativa de cada resultado. Hubo un pobre acuerdo sobre el equilibrio entre beneficios y daños y recomendaciones. La mayoría de los desacuerdos se resolvieron fácilmente a través de la discusión. En general, encontramos que el enfoque GRADE es claro, comprensible y sensato. Se realizaron algunas modificaciones en el enfoque y se acordó que se necesitaba más información en los perfiles de evidencia. CONCLUSIÓN: Los juicios sobre la evidencia y las recomendaciones son complejos. Algo de subjetividad, especialmente en lo que respecta a las recomendaciones, es inevitable. Creemos que nuestro sistema para guiar estos juicios complejos equilibra adecuadamente la necesidad de simplicidad con la necesidad de una consideración completa y transparente de todos los temas importantes.