DEFINICIN: Prediccin de un criterio externo para el que se va a utilizar el test correlaciones'

1
5. VALIDEZ REFERIDA A CRITERIO

• DEFINICIÓN Predicción de un criterio externo
  para el que se va a utilizar el test
  (correlaciones).
• TIPOS
• 1.) PREDICTIVA
• 2.) CONCURRENTE

2
TIPOS
PREDICTIVA (p.e., test de selección)
SELECCIÓN

APTITUD
rxy
RENDIM DEDICA INTERP
3
CONCURRENTE (pe., tests de certificación y
diagnóstico).
4
5.1.- EL COEFICIENTE DE VALIDEZ PROCEDIMIENTO
muy sencillo, una correlación. Ejemplo Queremos
predecir y a partir de x
COMO PREDECIR Y A PARTIR DE X?
5
Gráfico de dispersión X e Y
6
BUSCAMOS LA PREDICCIÓN QUE MINIMIZA LOS ERRORES
DE PREDICCIÓN (AL CUADRADO)
7
PREDICCIÓN DE Y A PARTIR DE X
1.- Estimación puntual Ecuación de regresión de
Y sobre X y es la predicción que hacemos de y a
partir de X YABX
Luego, Y1.8X Si la persona hubiera sacado 10
en el test le predeciríamos una puntuación de 9
en el criterio.
8
rxy .8 es el coeficiente de validez. Interpretaci
ón r2 .64 r2 es el coeficiente de
determinación e indica la proporción de varianza
del criterio que es pronosticable a partir del
test. YAxB

9
Concepto de error típico de medida

• Si cogiéramos a todas las personas con una
  puntuación V en el test, sus puntuaciones en X
  se distribuirán
• 1. Con distribución
• normal
• 2. Media
• la puntuación verdadera (V)
• 3. Desviación típica
• el error típico de medida (SE)

10
(No Transcript)
11
Concepto de error típico de estimación

• Si cogiéramos a todas las personas con una
  puntuación X en el test, sus puntuaciones en Y
  se distribuirán
• 1. Con distribución
• normal
• 2. Media
• la puntuación pronosticada (Y)
• 3. Desviación típica
• el error típico de estimación (Sy-y)

12
(No Transcript)
13
Sy-y es el error típico de estimación (no
confundir con el error típico de medida Se), es
la desviación típica de los errores de pronóstico
y se puede hallar mediante
14
2.- Estimación por intervalos Queremos calcular
a partir de la puntuación en el test X el
intervalo en el que se encontrara la puntuación
en el criterio Y con probabilidad 1-?. P(Lm lt Y
lt LM) 1-? p.e., si ?.05 P(Lm lt Y lt LM)0.95
Calculamos los límites del intervalo Lm
Yz?/2Sy-y
LM Yz1-?/2Sy-y ?z.025-1.96
?z.9751.96 Lm Y - 1.96Sy-y
LM
Y1.96(Sy-y)
Lm9-1.96(1.34)
LM91.96(1.34) Si la persona hubiera sacado 10
en el test predeciríamos que su puntuación en el
criterio se encuentra entre 6.374 y 11.626
(92.626) en el criterio con un 95 de confianza.
15
(No Transcript)
16
.
17
Factores que afectan a la amplitud del intervalo
(LM-Lm)

• Nivel de confianza
• (cuanto mayor, mayor amplitud)
• Coeficiente de determinación
• (cuanto mayor, menor amplitud)

18

• LA ELECCIÓN DEL CRITERIO
• Debe ser fiable Y válido... más criterios mejor
  que menos.
• Vigilar la temporalidad del criterio
• p.e., efecto de las variables de personalidad
  mediado por el mes de ingreso
• Que la correlación entre predictor y criterio no
  se deba a variables extrañas (que el predictor y
  el criterio correlacione por lo que queremos)
• p.e., extroversión-evaluación subjetiva del
  rendimiento por el supervisor pueden
  correlacionar pero no porque extroversión se
  relacione con el rendimiento sino porque el
  extrovertido le cae mejor al supervisor.

19
5.2.- FACTORES QUE AFECTAN AL COEFICIENTE DE
VALIDEZ (RXY)
rvxvy ryy
rxx
20
1º LA VERDADERA RELACIÓN ENTRE EL TEST Y EL
CRITERIO Y LA FIABILIDAD DEL TEST Y DEL CRITERIO

• Si al criterio Y se le puede aplicar la teoría
  clásica se demuestra que

rVxVy es la verdadera relación entre X e Y, es
decir el coeficiente de validez si no hubiera
errores de medida.
21
(No Transcript)
22
DEMOSTRACIÓN (sólo para curiosos)
Si los errores del test y el criterio no
correlacionan entre sí ni con las puntuaciones
verdaderas (supuestos de la teoría clásica)
entonces
23
y sabiendo que

entonces
luego

24
MÁXIMO COEFICIENTE DE VALIDEZ
25
MÁXIMO COEFICIENTE DE VALIDEZ
26
MÁXIMO COEFICIENTE DE VALIDEZ
27
La fiabilidad del test y criterio determinan el
máximo coeficiente de validez observable
Es decir, la correlación de un test con un
criterio nunca puede superar el índice de
fiabilidad del test (o del criterio) si el test
no es fiable, no puede tener validez referida a
ningún criterio.
28
COEFICIENTE DE VALIDEZ VERDADERO (RELACIONES
ENTRE CONSTRUCTOS)
29
CORRELACIÓN ENTRE X Y VY (QUE ES LO QUE
CONSEGUIMOS CON NUESTRO TEST)
30
CORRELACIÓN ENTRE VX E Y (A QUE PODEMOS ASPIRAR
MEJORANDO NUESTRO TEST)
31

• Cúando y cómo aplicar la corrección por
  atenuación
• Debe existir un estimador insesgado de la
  fiabilidad y del coeficiente de validez (p.e.,
  malos estimadores son aquellos que se calculan en
  muestras muy pequeñas)
• Los errores del test y del criterio no deben
  correlacionar.

32
2º Efecto de la longitud de las pruebas Fijo el
valor de rVxVy a más fiabilidad del test mayor
rxy. Por lo tanto, existe un efecto de la
longitud del test. Un test tiene un coeficiente
de fiabilidad rxx y un coeficiente de validez
rxy. Tras alargarlo n veces, su nuevo
coeficiente de validez Rxy será
33
Demostración (para curiosos)
34

• Los coeficientes de fiabilidad y de validez de un
  test de 20 items son .6 y .5 respectivamente.
  Alargamos el test 3 veces
• a.- El número de ítems del test alargado 203 60
  items
• b.- Coeficiente de fiabilidad del test alargado
• R nr/(1(n-1)r) (3)0.6/(12.6) .82
• c.- Coeficiente de validez del test alargado.
• d.- Queremos que el Test tenga un coeficiente de
  validez de .6 (Cúantos items debiera tener?)
• El número de ítems sería
  4.232085

35
e.- Queremos que el test tenga un coeficiente de
validez de .9 cúantos ítems debería tener?
El resultado negativo indica que no se puede
alcanzar una validez .9 por alargamiento del
test.
f.- el máximo valor que se puede alcanzar
alargando el test será
36

• 3º. Variabilidad en X y en Y, pues rxy es una
  correlación
• Homogeneidad de la muestra?restricción de rango
  (p.e., si calculamos rxy sólo en el grupo de los
  sujetos que fueron seleccionados)
• Corrección por restricción de rango
• - Es uno de los problemas más graves en los
  estudios de validez referida a criterio. La
  restricción del rango hace infraestimar
  severamente los coeficientes de validez.
• - Con respecto a qué grupo?

37
HURTZ y DONOVAN (2000). Personality and Job
performance the big five revisited. Journal of
Applied Psychology, 85(6), 869-879.
38
VALIDEZ INCREMENTAL
rXVy
39
El valor práctico de un método de selección
depende.

• 1.) La variabilidad en la adecuación de las
  personas en la muestra (p.e., auto-selección)
• 2.) ratio de selección(Punto de corte)