1. Instrucciones
1.1. Haga clic en el círculo al final de las ramas para abrir las ramas que siguen. Haga clic nuevamente para cerrarlas
1.2. Trate de responder la pregunta antes de abrir las ramas
2. ¿Por qué es complejo realizar una evaluación efectiva a los Profesionales de la salud
2.1. involucra a muchas partes y cada una con sus particularidades.
2.1.1. profesores
2.1.2. publico
2.1.3. pares
2.1.4. companeros
2.1.5. reguladores
2.2. la medición del aprendizaje debe incluir aspectos de competencia, y preferentemente una estrategia evaluativa multimodal
2.2.1. conocimiento
2.2.2. habilidad
2.2.3. Actitud
3. ¿Con qué propósitos se pueden utilizar las POMs en un evento educacional?
3.1. formativo
3.1.1. pueden ser útiles para suscitar en los alumnos un conocimiento base que permite una mejor conducción hacia un evento educativo y recibir al mismo tiempo un feedback durante el evento
3.2. sumativo
3.2.1. pueden utilizarse para evaluar objetivamente el resultado de un curso y utilizarse como un método de evaluación del aprendizaje. Su uso es especialmente apropiado cuando se necesita evaluar el desempeño de grandes grupos.
4. ¿Cuál es el punto de inicio al crear una evaluación efectiva con POMs?
4.1. es seleccionar el contenido relevante, construido con objetivos específicos, medibles, alcanzables y realistas. La evaluación debe apuntar a evaluar si dichos objetivos de aprendizaje se cumplieron
5. ¿Qué beneficios se obtienen al utilizar las preguntas de elección múltiple?
5.1. Nos permiten evaluar correctamente: tanto conocimientos como actitudes y habilidades, en la aplicación de estos conocimientos.
5.2. Discriminar adecuadamente los alumnos que saben de los que adivinan
6. ¿Cuáles son las principales ventajas y desventajas de la utilizacion de POMs?
6.1. ventajas
6.1.1. Rápido/Fácil/Calificación confiable
6.1.1.1. fácil y rápidamente permite evaluar a un numero grande de gente con una calificación confiable
6.1.2. Feedback rápido
6.1.2.1. en algunos casos se puede dar el feedback inmediatamente despues de que el participante selecciono la respuesta
6.1.3. Amplio rango de contenido
6.1.3.1. se puede abarcar varios temas
6.1.4. Evalúan niveles superiores de pensamiento
6.1.4.1. Si la pregunta esta bien construida, permite detectar niveles superiores de pensamiento
6.2. desventajas
6.2.1. Reconocimiento
6.2.1.1. Cuando las preguntas no estan bien redactadas, pueden presentarse pistas dentro de las respuestas.
6.2.1.2. Utilizar el azar para responderla
6.2.2. Tiempo-empleado para crear
6.2.2.1. las preguntas llevan tiempo de construccion
6.2.3. Se penaliza al lector lento
6.2.3.1. Cuando el tiempo es limitado para responder, hay estudiantes mas rápidos para leer que otros, esto puede ser una desventaja para algunos que son mas lentos
6.2.4. Se evalúa la habilidad de escritura?
6.2.4.1. no se evalua el nivel de redaccion de los participantes
6.2.5. Memorización
6.2.5.1. evitar preguntas cuyas respuestas requieran la memorización
7. ¿Cuáles fueron los cambios introducidos por Anderson y Cols al modelo de niveles cognitivos de Bloom?
7.1. revisaron los niveles cognitivos de Bloom e introdujeron cambios: Los sustantivos pasaron a ser verbos para agregar dinamismo al cambio de conducta aspirado luego de una experiencia de aprendizaje y los niveles superiores se revirtieron argumentando que para crear uno primero debe evaluar.
7.1.1. Modelo de los niveles de pensamiento cognitivo de Bloom. En la base representa los niveles mas básicos de pensamiento y progresa ininterrumpidamente hasta el nivel superior en la parte de arriba de la misma.
7.2. Cada nivel se identifica por verbos de acción que van a definir lo que la pregunta cuestiona.
7.2.1. CREANDO
7.2.1.1. USE LA INFORMACION PARA CREAR ALGO NUEVO
7.2.1.1.1. Diseñar, Construir, Planificar, Producir, Idear, Inventar
7.2.2. EVALUANDO
7.2.2.1. EXAMINAR INFORMACION CRITICAMENTE Y JUZGAR
7.2.2.1.1. Juzgar, Evaluar, Criticar, Defender
7.2.3. ANALIZANDO
7.2.3.1. PRESENTAR LA INFORMACION y EXPLORAR INTERRELACION
7.2.3.1.1. Categorizar, Examinar, Comparar, Contrastar, Organizar
7.2.4. APLICANDO
7.2.4.1. UTILICE LA INFORMACION EN UNA SITUACION NUEVA (PERO SIMILAR)
7.2.4.1.1. Usar, Diagramar, Crear cuadros, Dibujar, Aplicar, Resolver, Calcular
7.2.5. COMPRENDIENDO
7.2.5.1. COMPRENDER Y ENTENDER LA INFORMACION
7.2.5.1.1. Interpretar, Resumir, Explicar, Inferir, Parafrasear, Discutir
7.2.6. RECORDANDO
7.2.6.1. ENCONTRAR O RECORDAR INFORMACION
7.2.6.1.1. Listar, Encontrar, Nombrar, Identificar, Localizar, Describir, Memorizar, Definir
8. ¿Cómo es la estructura de una POM?
8.1. CONTENIDO
8.1.1. describe el caso o el problema a solucionar
8.2. CONSIGNA
8.2.1. formula la pregunta, que debe tener un formato formulado claramente sobre el caso presentado. Debe presentarse luego del escenario clínico
8.3. OPCIONES DE RESPUESTA
8.3.1. respuestas alternativas, de las cuales solo una es la correcta, denominada CLAVE. A las incorrectas son los DISTRACTORES.
9. ¿Qué pasos utilizamos al escribir una PMO
9.1. PASO 1
9.1.1. decidir el punto focal sobre el cual voy a desarrollar la Consigna, eligiendo entre ciencia básica de la enfermedad, historia, diagnostico, investigaciones o tratamiento.
9.1.1.1. La pregunta o Consigna debe presentarse luego del escenario clínico.
9.1.1.1.1. Con diferentes Consignas, el mismo escenario genera preguntas múltiples y diferentes opciones de respuestas, que pueden utilizarse en otras evaluaciones.
9.1.1.1.2. buenos ejemplos de preguntas:
9.2. PASO 2
9.2.1. enmarcar la consigna en un contexto clínico o escenario, el cual es el contenido del PMO
9.2.1.1. El contenido debe presentar un problema a ser resuelto
9.2.1.1.1. de manera, clara y directa
9.2.1.1.2. haciendo foco solamente en el contenido relevante
9.2.1.1.3. compuesto por solo por la información relevante, en lugar de duplicar información a lo largo de las opciones.
9.2.1.2. EVITE utilizar lo siguiente:
9.2.1.2.1. Evite ayudas gramaticales,tales como: una respuesta mas larga que otras, una respuesta gramaticalmente diferente, respuestas excluyentes entre si, respuestas que ayuden al alumno por ejemplo si se sabe que una respuesta es falsa, entonces la otra debe ser la correcta
9.2.1.2.2. evitar información redundante o engañosa
9.2.1.2.3. las afirmaciones no son ideales en las POM, pero si se utilizan, el espacio en blanco debe presentarse al final de la oración
9.2.1.2.4. se deben evitar las preguntas con negativos, pero de ser utilizadas, los negativos deben estar resaltados.
9.2.1.2.5. La descripción del problema del contenido debe estar lo suficientemente claro, asegurándose que solo una de las respuestas sea la correcta y, debe permitir que el alumno realice una elección inequívoca al leer las opciones.
9.3. PASO 3
9.3.1. Escribir las opciones de respuesta: respuesta CLAVE o Respuesta Única Correcta y los DISTRACTORES u Opciones Menos Correctas
9.3.1.1. El numero de opciones recomendado es 4.
9.3.1.1.1. Las Opciones deben mostrar contenido y deben
9.3.1.1.2. EVITE lo siguiente:
9.3.1.2. La CLAVEde estar ubicada aleatoriamente en posiciones alternativas a lo largo de la evaluación
9.3.1.2.1. Solo debe haber una ÚNICA Respuesta Correcta.
9.3.1.3. Los DISTRACTORES deben ser consistentes en el largo, contenido y parafraseo
9.3.1.3.1. Deben ser respuestas PLAUSIBLES pero que no respondan la pregunta en cuestión.
9.3.1.3.2. Pueden basarse en ERRORES CONCEPTUALES COMUNES de los alumnos.
10. ¿Qué principios debemos tener en cuenta al formular una POM?
10.1. Principios/TIPS a tener en cuenta
10.1.1. AGREGAR un escenario clínico al contenido y formular una pregunta o consigna.
10.1.1.1. Esta estrategia permite la definición de un contexto específico y requiere un análisis del problema para contestar correctamente, además de un nivel de pensamiento mas elaborado.
10.1.1.1.1. Construir POMs para suscitar el nivel mas alto del modelo de Bloom, que es Crear, es muy difícil es esta modalidad de evaluación. Para responder correctamente se requiere la habilidad de juzgar y evaluar .
10.1.1.2. El uso de una imagen es una fuente adicional de información que debe ser tomada en cuenta para contestar correctamente.
10.1.2. Las opciones deben ser consistentes en contenido y largo.
10.2. EVITAR los siguientes errores comunes:
10.2.1. El contenido con información irrelevante
10.2.2. El contenido con una afirmación abierta y no formulada como pregunta.
10.2.3. Las opciones presentadas como frases repetidas o diferenciadas (por ejemplo: solo una de ellas escrita en mayúscula, promoviendo cierta tendencia a elegirla como la correcta).
10.2.4. usar ABREVIATURAS,
10.2.5. Opciones absurdas que serán inmediatamente descartada dejando solo tres posibilidades.
10.2.6. La respuesta Clave es mas larga que las otras opciones y contiene una palabra indefinida.
10.2.7. Hay mas de una respuesta correcta defendible.
11. ¿Cuales son las preguntas que debemos hacemos al momento de evaluar la calidad de una evaluación?
11.1. ¿ Es la prueba, diagnostico, formativa o sumativa?
11.1.1. IMPACTO EDUCACIONAL
11.2. ¿Replica la prueba un desafío similar a la realidad?
11.2.1. FIABILIDAD
11.3. ¿Produce la prueba un resultado similar, si esta se repite?
11.3.1. CONFIABILIDAD
11.4. ¿Estamos calificando lo que pensamos que calificamos?
11.4.1. VALIDEZ
11.5. ¿Qué tan dificil fue la pregunta? ¿Permite diferenciar los buenos estudiantes de los malos?
11.5.1. ANALISIS DEL TEMA
11.6. evaluación debe estar cuidadosamente evaluada para garantizar la calidad del examen
12. ¿ Para qué se mide la CONFIABILIDAD
12.1. La CONFIABILIDAD mide en qué grado cada instrumento produce el mismo resultado de manera repetida utilizando coeficientes de correlación. El Instrumento siempre debe medir lo mismo para que sea confiable, esto no implica que sea preciso
12.2. La CONSISTENCIA INTERNA Se basa en la correlación promedio entre los diferentes temas dentro de un mismo examen
12.2.1. Es importante tener el concepto , pero este no es fundamental para la elaboración de presentaciones habituales
13. ¿Para qué se mide la VALIDEZ?
13.1. Validez del contenido
13.1.1. Establece si las PMOs son relevantes, apropiadas y representativas.
13.1.2. Evaluado por un panel experto de al menos tres personas
13.2. Validez Editorial
13.2.1. Mide la claridad, legibilidad y facilidad de realización
13.2.2. Revisión editorial y estudio piloto
14. ¿Cómo se combinan los atributos de VALIDEZ Y LA CONFIABILIDAD?
14.1. la validez esta relacionada cercanamente a la fiabilidad, porque para que un instrumento sea válido, debe ser fiable
14.1.1. A representa una medición de un instrumento inconsistente, inestable e inválido: los temas producen resultados dispersos y lejanos del blanco; como se describe en el diagrama B; debemos, también, tener en cuenta que un instrumento puede ser fiable pero no válido como se describe en el diagrama C y finalmente el instrumento ideal, que refleja un resultado valido y fiable como se describe en el diagrama D
15. ¿Para qué se mide la CONTRUCCION de validez?
15.1. Mide el alcance al que un instrumento mide un atributo teórico
15.2. Análisis de los temas es de utilidad
15.2.1. Verificar la clave
15.2.1.1. El chequeo de la clave asegura que no hay mas que una respuesta que puede ser considerada correcta a la pregunta. Esto debe ser llevado a cabo por un numero de expertos en el área del contenido.
15.2.2. Evaluación del distractor
15.2.2.1. Un buen distractor debe ser seleccionado por aquellos cuyo desempeño es pobre , e ignorado por aquellos con buen desempeño.
15.2.2.2. Los distractores que no son seleccionados o son seleccionados consistentemente por unos pocos participantes son poco efectivos y deben ser reemplazados.
15.2.2.3. Distractores seleccionados mas frecuentemente que la respuesta correcta, pueden indicar que las instrucciones son insuficientes o la pregunta es engañosas.
15.2.3. Análisis de la diferenciación del tema
15.2.3.1. refleja cómo cada PMO se relaciona con el desempeño general del examen.
15.2.3.1.1. Si una pregunta es altamente diferenciable, la puntuación general de aquellos que eligen la respuesta correcta debe ser mas alta que la puntuación general de aquellos que eligen la respuesta incorrecta
15.2.3.1.2. Cero diferenciación ocurre cuando números equivalentes de participantes seleccionan la clave o el distractor, mientras que la
15.2.3.1.3. Diferenciación Negativa ocurre cuando una pregunta suscita una respuesta incorrecta seleccionada por participantes con un buen desempeño y la respuesta correcta por aquellos cuyo desempeño no es tan bueno. Estas PMOs deben ser revisadas y re comprobadas.
15.2.4. Análisis de la dificultad del tema
15.2.4.1. A menor dificultad del tema, o a mayor habilidad del participante, mayor es la posibilidad que la respuesta sea correcta.
15.2.4.2. La dificultad del tema establecido por la proporción de participantes seleccionando la respuesta correcta es un criterio secundario para la inclusión de la PMO
15.2.4.3. La variación de la dificultad del tema disminuye el coeficiente de fiabilidad, pero también incrementa la diferenciación general de la prueba
16. ¿Qué pasos debemos tener en cuenta al Diseñar un grupo de PMO?
16.1. Al diseñar un grupo de PMOs para una prueba, se deben elaborar preguntas de mas para eliminar aquellas con baja confiabilidad y validez.
16.1.1. Para realizar este análisis se debe realizar un estudio piloto.
16.2. Las PMOs deben luego ser ranqueadas por su índice de diferenciación (correlaciones totales de los temas) y debe calcularse coeficiente de fiabilidad para todo el grupo de PMOs.
16.2.1. Las PMOs con menor diferenciación deben ser reemplazadas por otras con mayor nivel de dificultad. Si la fiabilidad es menor a lo deseado, deben agregarse entre 5-10 POMs mas, basándose en el análisis la dificultad del tema
17. ¿Cuáles son, en resumen las características y principios fundamentales de las POMS?
17.1. Características
17.1.1. Miden el conocimiento objetivamente
17.1.2. Son rápidas y fáciles de emplear
17.1.3. Pueden usarse sobre un gran numero de participantes/tiempo de calificación/temas
17.2. Principios
17.2.1. Garantiza relevancia clínica
17.2.2. Diseñada para evaluar niveles altos de pensamiento
17.2.3. Estudio piloto para garantizar su validez y fiabilidad.