Rev Educ Cienc Salud 2014; 11 (2): 116‐123 116 TRABAJO ORIGINAL Proceso de mejoría de pruebas de conocimiento con preguntas de selección múltiple en un curso teórico de pregrado de medicina. EDUARDO KATTAN T. *a , GONZALO PÉREZ D. *a , CATALINA LE ROY O. ****a , MARISOL SIRHAN N. **,***a , AGUSTÍN GONZÁLEZ C. *b , TOMÁS RYBERTT L. *b , LUZ COLLINS V. **c , NANCY SOLÍS L. ***d , MARGARITA PIZARRO R. ***d , MARCO ARRESE J. ***a y ARNOLDO RIQUELME P. **,***e RESUMEN Introducción: La metodología de evaluación ha tenido un crecimiento exponencial en los últimos años. La evalua‐ ción escrita con preguntas de selección múltiple (PSM) sigue siendo el instrumento más utilizado para evaluar conoci‐ mientos. Objetivos: Evaluar la calidad de las PSM durante un proceso de implementación de mejorías en la calidad de la construcción de pruebas de conocimiento. Material y Método: Se analizó la calidad de las PSM utilizadas en las evaluaciones escritas de un curso teórico del Pregrado de Medicina (período 2002‐2005) de acuerdo a: validez (contenido, construcción, y predictiva), % de PSM con violaciones de los principios de escritura (criterios de Haladyna) y niveles cognitivos explorados (taxonomía de Bloom). Se utilizó una pauta de construcción de pruebas, con énfasis en la cobertura de los contenidos y el mapeo de los obje‐ tivos del curso. En 2006 se crearon PSM nuevas, se evaluó calidad de las PSM y confiabilidad del instrumento según mé‐ todo de Cronbach. Las comparaciones se realizaron con Test Z y corrección Bonferroni posthoc. Resultados: La cobertura de temas subió progresivamente hasta el 100% (p = 0,001). En el período 2002‐2005, un 54% de las PSM presentaba al menos una violación de los principios de escritura, disminuyendo a un 18,8% (p = 0,001) el año 2006. Paralelamente, se observó un aumento significativo de los niveles cognitivos superiores de Bloom (p < 0,001). Conclusiones: El uso de una pauta para la construcción de una prueba teórica con PSM, así como la revisión siste‐ mática de las PSM de acuerdo a los criterios de Haladyna por educadores médicos con formación en evaluación, per‐ mitió ampliar la cobertura de los temas del curso evaluado y mejorar la validez y confiabilidad del instrumento, explo‐ rando niveles cognitivos superiores. Financiamiento: FONDECYT Proyecto N° 1120652 (A.R.). Palabras clave: Preguntas de elección múltiple, Evaluación de conocimientos, Estudiantes de medicina, Pregrado. SUMMARY Improvement process in knowledge tests with multiple‐choice questions in a theoretical course of medical undergraduate. Introduction: Methodology related to assessment has experienced an exponential growth in the last years. The written evaluation with multiple‐choice‐questions (MCQ) is still the leading instrument used to assess knowledge. Objectives: To evaluate the quality of MCQ, during the implementation of a quality improvement process of cognitive assessment instruments. Recibido: el 27/04/14, Aceptado: el 10/06/14. * Escuela de Medicina, Pontificia Universidad Católica de Chile, Santiago, Chile. ** Centro de Educación Médica, Pontificia Universidad Católica de Chile, Santiago, Chile. *** Departamento de Gastroenterología, Escuela de Medicina, Pontificia Universidad Católica de Chile, Santiago, Chile. **** Departamento de Pediatría, Escuela de Medicina, Pontificia Universidad Católica de Chile, Santiago, Chile. a Médico. b Estudiante de Medicina. c Profesora. d Bioquímico. e Médico, Magíster en Educación Médica.