5.3. Evaluación de la calidad de los estudios
Los estudios identificados con la búsqueda constituyen la serie inicial, pero no todos ellos serán incluidos en el análisis. Las referencias resultantes de esta preselección se leerán a texto completo y se valorarán siguiendo los criterios de selección con el fin de determinar los estudios definitivos a incluir en la RS.
Es el equipo investigador el que establece los criterios de calidad que considera aceptables en cada caso, incluso puede desarrollar su propio formulario de recogida de datos. Los cuestionarios o esquemas de análisis crítico o checklists proporcionan un método objetivo de análisis. Sirven para proporcionarnos los criterios de calidad para incluir los artículos. Presentan los problemas típicos de cualquier cuestionario, la variabilidad inter e intraobservador y otras limitaciones que pueden disminuir su fiabilidad y reproducibilidad, aspectos que deben ser evaluados si se utilizan.
Existen publicadas diversas escalas de valoración de la calidad de los estudios, que si bien valoran generalmente los mismos aspectos (diseño del estudio, control de sesgos, tamaño muestral, seguimiento, aleatorización, enmascaramiento, etc.), pueden llegar a resultados discrepantes. David Moler y sus colaboradores han identificado 25 escalas y 9 listas utilizadas para evaluar la validez y la calidad de los ensayos clínicos aleatorizados y controlados. Las escalas más frecuentemente usadas son las de Jadad y los criterios de Guyat y Sacket. Existen otras guías como Consort, para experimentos clínicos, que evalúan más la calidad de los informes que la calidad metodológica.
En la Red CASPE (Critical Appraisal Skills Programme Español), dentro del programa de habilidades en Lectura Crítica Español, podemos encontrar algunos ejemplos accesibles desde el siguiente link:
En la web del CEBM (center for Evidence Based Medicine) también podemos encontrar recursos en español desde el siguiente link:
De manera simultánea a la extracción de datos, dos miembros del equipo investigador evalúan la calidad de los estudios. Tras esta evaluación se seleccionan los de buena calidad.
Otro aspecto a decidir es si la selección se realiza con método ciego para los revisores. El enmascaramiento puede ser para los nombres de los autores, instituciones y publicaciones, y para los resultados de los estudios. La evaluación a ciegas puede producir puntuaciones inferiores y más uniformes, pero se deben sopesar los beneficios frente a los costes ocasionados por necesitar más recursos. En caso de discrepancias, se procederá igual que a la hora de obtener los artículos, teniendo en cuenta:
- Validez interna de un estudio, relacionada con la exactitud, fiabilidad y reproducibilidad.
- Validez externa, que es la potencialidad de generalización de sus resultados a personas o poblaciones distintas a los sujetos del estudio.
Se trata de evaluar la validez interna y externa de los estudios seleccionados (metodología, características de los participantes y del tipo de estudio), la precisión (IC) y las medidas de resultado (criterio más determinante para la selección de los artículos identificados). A veces, se observa la ausencia de datos imprescindibles para la lectura crítica del artículo. siempre que sea posible, se debe intentar obtener datos adicionales a los ofrecidos en los artículos, contactando directamente con el autor.
Una herramienta para lectura crítica y evaluación de la calidad de gran versatilidad y sencillo manejo son las fichas de lectura crítica de OSTEBA (FLC Osteba http://www.lecturacritica.com/es/index.php). Las FLC son unas herramientas metodológicas, en formato electrónico y en español, destinadas a la lectura crítica y a la síntesis de la evidencia científica. Esta plataforma dispone de fichas específicas para cada diseño de estudio epidemiológico que permiten analizar la información de una forma estructurada y rigurosa. Cada ficha está dividida en diez áreas para abarcar todos los aspectos relevantes, como la pregunta de investigación, el método, los resultados, las conclusiones, etc. La calificación final de la calidad de los estudios se otorga de forma cualitativa, pudiendo ser: alta, media, baja y no clasificable. Permite además agilizar la síntesis de la información mediante la generación automática de tablas de resumen de datos. Esta aplicación on-line está diseñada para facilitar los procesos de lectura crítica y de síntesis de la evidencia. Es de acceso gratuito y precisa de un registro previo.
Finalizada la evaluación de calidad podemos elaborar un diagrama de flujo de selección de estudios con los resultados seleccionados.
Extraido de Av. Diabetol. 2012;28:10