TESTS DE RENDIMIENTO PTIMO

1

• TESTS DE RENDIMIENTO ÓPTIMO
• FORMATOS DE RESPUESTA MAS FRECUENTES
• ÍTEMS DE RESPUESTA CERRADA
• 1 OPCIÓN MÚLTIPLE
• 2 VERDADERO/FALSO
• ÍTEMS DE RESPUESTA ABIERTA
• 1 ENSAYO
• 2 RESPUESTA CORTA
• 3 RELLENAR ESPACIOS EN BLANCO
• AYUDA A LA CREACIÓN DE EXÁMENES
• www.uam.es/ace

2
DEBATE RESPUESTA ABIERTA VS. RESPUESTA CERRADA

• CRITERIOS DE CORRECCIÓN
• Facilidad de redacción
• Facilidad de corrección
• Automatización de la corrección
• Objetividad inter-jueces
• Facilidad para muestrear contenidos

3
REGLAS DE REDACCIÓN (OPCIÓN-MÚLTIPLE)

• 1. RECOMENDACIONES GENERALES
• 1.1 Del contenido y número de los ítems Debe
  haber suficiente cantidad y variedad deben ser
  independientes y deben ser relevantes
• Cuantos más ítems, mejor
• No encadenar preguntas
• Representativos de lo que se quiere medir El nº
  de ítems debe ser proporcional a la importancia
  de cada tema
• Cada ítem un contenido
• NO deben ser redundantes
• Evitar ítems textuales
• 1.2. Tienen que tener una respuesta definida
• Las preguntas no deben reflejar opiniones sino
  hechos.
• No usar lenguaje absoluto, tal como "nunca" y
  "siempre"
• 1.3. Deben ser ajustados a la población
  finalmente seleccionada
• Deben medir lo mismo en todos los sujetos de la
  población.
• Ajustados en dificultad. Anticipar la dificultad
  e incluir variedad (más de dificultad media). Las
  fuentes de dificultad deben ser relevantes. Qué
  la dificultad no esté en la forma de plantear la
  tarea.
• Evitar ítems truculentos o trampa que
  intenten engañar a los evaluados.

4

• El escorbuto es causado por una carencia de la
  vitamina
• a) A b) B1 c) C
• Es una buena fuente de esta vitamina
• a) El jugo de naranja
• b) El hígado
• c) El arroz sin descascarar

5

• En 1967, el coeficiente de mortalidad por
  accidentes de todas clases, por cada 100.000
  habitantes del grupo de edad comprendida entre 15
  y 24 años fue de
• a) 59.0
• b) 59.12
• c) 59.2

6

• Qué ítems son mejores para medir conocimientos?
• a.) ítems de elección-múltiple
• b.) ítems de respuesta abierta

7

• Si trabajamos con grupos muy extremos en los
  valores de la VI podemos encontrarnos con que
  nuestro experimento carezca de
• sensibilidad
• validez interna (por la regresión a la media)
• validez externa.

8

• 2. ELABORACIÓN DEL ENUNCIADO
• 2.1. Que se lean fácilmente (rápido), que se
  entiendan bien, que vayan al grano
• Utilización del tiempo presente. Frases cortas.
• La idea principal, en el enunciado (no en las
  opciones).
• Evitar el uso de negaciones. Si se usan,
  RESALTARLAS.
• El lenguaje adaptado a la población
• 2.2. Evitar dar pistas y evitar confundir
• Evitar errores de concordancia gramatical.
• Evitar proporcionar indicios sobre la solución

9

• Cuál de los siguientes no es un beneficio de los
  ítems de opción múltiple?
• a) Mejor muestreo de contenidos.
• b) Más apropiados para medir el rendimiento.
• c) Objetividad de su corrección.

10

• 101 (2002). Cuál es la alternativa FALSA?
• 1) La encopresis consiste en la evacuación
  repetida de heces en lugares inadecuados, sea
  involuntaria o intencionada.
• 2) La encopresis requiere una edad cronológica de
  por lo menos 3 años.
• 3) La encopresis implica al menos un episodio al
  mes durante un mínimo de 3 meses.
• 4) La encopresis se puede codificar con
  estreñimiento o incontinencia por rebosamiento.
• 5) La encopresis se puede codificar sin
  estreñimiento ni incontinencia por rebosamiento.

11

• 16 (1999). Durante el sueño
• 1. La fase REM es inducida por la descarga de
  neuronas colinégicas de la protuberancia.
• 2. En la fase REM se produce un incremento de
  los niveles de noradrenalina cerebrales.
• 3. La aparición de ondas alfa determina el
  inicio de la fase 3 del sueño lento.
• 4. Los artefactos eléctricos como los complejos
  k son característicos de la fase 4 del sueño
• 5. Se observa una hiperactividad serotominérgica
  en el locus coerulus y en el hipocampo.

12

• 22. El ave acuática anseriforme común en España
  que tiene plumas en la cabeza es un
• a) grulla
• b) ánade
• c) oca
• d) garza

13

• 21 (MIR). En la medida de la ansiedad, una medida
  electrodérmica de especial significado es
• Flujo sanguíneo
• Volumen pletismográfico ante la presentación del
  objeto temido
• Las fluctuaciones espontáneas en el nivel de
  conductancia de la piel ausencia de estimulación.
• La pneumografia de impedancia
• Exploración de necesidades y evolución del
  entorno social.

14

• 3. ELABORACIÓN DE OPCIONES
• 3.1. Cuidar el número de opciones, su calidad y
  su independencia
• Se recomiendan al menos 2 distractores
• No deben solaparse (mutuamente exclusivas)
  evitar ninguna de las anteriores y todas las
  anteriores
• Plausibles. Usar errores más comunes. Homogéneas
  en contenido, longitud y lenguaje. Evitar
  términos nunca, siempre
• 3.2. Cuidar el orden de las opciones
• Si siguen un orden lógico, preservarlo en el
  formato de respuesta.
• Colocar la opción correcta de forma balanceada en
  las distintas posiciones (PIR ?14 de los ítems
  en la 5º posición)

15

• 71 (2002). Los instrumentos de evaluación que
  siguen un criterio racional en su construcción se
  caracterizan por
• Basarse tanto en la observación como en la teoría
  que sustenta las características que pretende
  evaluar.
• No existir una decisión previa en relación con el
  contenido del instrumento el elemento básico es
  la referencia a un criterio exterior a la propia
  prueba
• Utilizar preferentemente técnicas de análisis
  factorial para su construcción.
• Utilizar preferentemente estrategias de
  consistencia interna para su construcción
• Nunca se ha utilizado un criterio racional para
  la construcción de un procedimiento de evaluación.

16

• 159 (2002). Si la puntuación 40,7 ocupa el
  percentil 60, indica que
• 1) El 40,7 de los sujetos se encuentra por
• encima del valor 60.
• 2) El 40 de los sujetos supera el valor de la
  citada puntuación.
• 3) El 60 de los sujetos supera el valor de la
  citada puntuación.
• 4) El 50,3 de los sujetos se encuentra por
• encima del valor 60.
• 5) Ninguna alternativa es correcta.

17

• 105 (2001). Los individuos que sufren hipocondría
  pueden tener pensamientos intrusos sobre una
  enfermedad física, pero pueden presentar dentro
  del cuadro comportamientos compulsivos asociados,
  como por ejemplo demandas repetidas de
  explicaciones?
• Sí
• No.
• Sólo si además presentan otras compulsiones no
  relacionadas con la preocupación por esa
  enfermedad.
• Sólo si además presentan obsesiones no
  relacionadas con una o más enfermedades.
• Ninguna de las anteriores.

18

• 14 (2001). Qué explicaciones aceptables se han
  dado a las diferencias individuales en
  personalidad?
• Realmente hay tantas causas que cualquier
  explicación es buena.
• Se deben al alma de cada persona.
• Se deben a factores genéticos y/o ambientales.
• Se deben al azar.
• No se han dado explicaciones plausibles.

19

• 219 (1996). Señalar cuál de las siguientes
  afirmaciones es FALSA como característica de la
  Terapia Cognitiva
• 1) Se orienta hacia los problemas concretos del
• paciente.
• 2) Determina actitudes disfuncionales.
• 3) No es una terapia directiva.
• 4) Examina la evidencia a favor o en contra de
• pensamientos automáticos.
• 5) Todas son ciertas.

20

• 172 (1999). El DSM-III-R define los trastornos de
  personalidad cuando se cumple que
• Los rasgos de personalidad son inflexibles y
  desadaptativos.
• Los rasgos de personalidad causan un deterioro
  funcional significativo.
• Los rasgos de personalidad producen un malestar
  subjetivo.
• l), 2) y 3) son verdaderas.
• Todas son falsas.

21

• 89 (2001). Que un sujeto presente peligro
  persistente de lesionar gravemente a otros o a sí
  mismo o incapacidad persistente para mantener la
  higiene personal mínima, sin presencia de
  alteraciones o limitaciones físicas o ambientales
  que las explique, supondrá una asignación de
  puntuación en la Escala de Evaluación de la
  actividad global, según el DSM IV. Indique cuál
  sería la correcta
• 81-90.
• 1-10.
• 31-40.
• 91-100.
• 51-60.

22

• Ejemplos de estrategias para responder a ítems de
  opción-múltiple
• 1. Si en un ítem hay 2 alternativas que se
  diferencian en una palabra o frase es frecuente
  que una de aquellas sea la correcta
• 2. Generalmente las opciones con términos como
  nunca o siempre tienden a ser incorrectas. Si
  alguna alternativa contiene el término
  frecuentemente, quizás, es probable...
  tiende a ser la correcta.
• 3. Si eres capaz de descartar alternativas,
  responde al azar

23
Rendimiento típico

• 1. Tipos de Formatos rendimiento típico
• Opción binaria
• Me encanta esta clase. Si( ) No( )
• Categorías ordenadas (Likert)
• Valoración acuerdo - descuerdo
• Frecuencia nunca siempre
• Me encanta Madrid
• a) Totalmente de acuerdo (Muy de acuerdo)
• b) de acuerdo (Bastante de acuerdo)
• c) Indiferente
• d) En desacuerdo (Bastante en desacuerdo)
• e) Totalmente en desacuerdo (Muy de acuerdo)
• Falto a clase
• a) Nunca
• b) A veces
• c) Normalmente
• d) Casi siempre
• e) Siempre

Pocas veces / Bastantes veces / Casi siempre.
24

• En mis ratos de ocio, frecuentemente estoy sola.
• a) Casi nunca
• b) A veces
• c) Con frecuencia
• d) Casi siempre

25

• 2. Recomendaciones generales para el formato de
  respuesta de categorias ordenadas
• Relevantes, en el sentido de que su contenido
  debe relacionarse claramente con el rasgo.
  Redactar enunciados que discriminen entre los de
  alto y bajo nivel de rasgo.
• Facilitar que todo el mundo interprete el ítem de
  la misma manera
• Evitar ambigüedad
• Evitar excesiva generalidad Frases cortas,
  simples e inteligibles.
• Evitar incluir dos contenidos en un ítem (p.e.,
  conjunciones)
• Evitar dobles negaciones.
• Evitar universales (todo, nada, siempre, nunca),
• En formato de acuerdo, no plantear la existencia
  de hechos (lo importante es la valencia personal
  sobre las afirmaciones).

26

• 3. MINIMIZAR SESGOS PROPIOS DE ESTE TIPO DE
  FORMATO
• Deseabilidad social (emitir respuestas
  socialmente aceptables para transmitir una imagen
  positiva)...
• - Autoengaño
• - Manejo de Impresiones
• Reducen la veracidad de las respuestas.

27
Cómo evitarla.

• El grado de deseabilidad social que manifiestan
  los ítems puede evaluarse
• Mediante jueces expertos
• Viendo el comportamiento del ítem en distintas
  situaciones (por ejemplo, comparar situaciones de
  selección con situaciones donde el individuo
  quiere conocer su personalidad)
• Frecuencia de elección (poca variabilidad).
• Puede controlarse
• Baremos específicos
• Asegurar confidencialidad (anonimato)
• Informar de la presencia de escala de sinceridad.

28
Escala de Deseabilidad Social

• Alguna vez he tenido un comportamiento poco
  correcto, para sacar ventaja sobre otra persona
  NO
• Siempre estoy dispuesto a admitir un error SI
• Admito mis errores inmediatamente SI
• Alguna vez deseo vengarme, más que perdonar y
  olvidar NO
• Alguna vez he sentido resentimiento cuando las
  cosas no salen como yo quería NO
• Soy siempre amable, incluso con gente que me
  resulta desagradable SI
• Siempre escucho, no importa quién esté hablando
  SI
• SI-gt Comportamientos socialmente deseables muy
  infrecuentes
• NO-gtComportamientos socialmente indeseables que
  tenemos alguna vez

29

• Aquiescencia (tendencia a responder
  afirmativamente, independientemente del contenido
  por el que se pregunta) conviene redactar ítems
  de modo directo e inverso. A posteriori, se puede
  comprobar cómo una persona ha respondido a los
  ítems directos e inversos. También puede
  comprobarse que la correlación entre ambos tipos
  de ítems es alta.
• Sesgo de negatividad

30

• Hay sesgo de aquiescencia?

31

• 4. Sobre las categorías
• Número de categorías
• Lo más usual es 5 (menos en poblaciones
  especiales niños, discapacitados, mayores,...).
• Más (7 u 8) lleva a inconsistencias en las
  respuestas.
• Menos (2 ó 3) lleva a poca discriminación (menor
  variabilidad) y a reducir la fiabilidad siempre
  podría compensarse con un número mayor de ítems.
• Uso de la categoría central
• Cuando el número de categorías es mayor que 3,
  las propiedades psicométricas del ítem no se ven
  afectadas.
• Con 3 categorías funcionan mal si las
  seleccionan las personas que no se comprometen
  con lo que se les está preguntando o no
  comprenden el enunciado.

32
Distancia similar entre categorías

• Señale con una X la percepción que tiene de las
  siguientes operadoras de telefonía