Diseño y Validación de Instrumnetos de Medición en Ciencias Sociales

2. UNIVERSIDAD PEDAGÓGICA EXPERIMENTAL LIBERTADOR
INSTITUTO PEDAGÓGICO DE BARQUISIMETO
LUIS BELTRÁN PRIETO FIGUEROA
SUBDIRECCIÓN DE INVESTIGACIÓN Y POSGRADO
MAESTRÍA EN EDUCACIÓN
MENCIÓN ENSEÑANZA DE LA QUÍMICA
Validez y confiabilidad
de Instrumentos
de Investigación Educativa
PARTICIPANTES: OROPEZA ALISMAR
CABRE ELIAS SAMIR
GUEVARA FRANCISCO
CURSO: Instrumentos de Recolección de
Datos
FACILITADORA: Profa. ANA Y. ALVARADO
Noviembre de 2011

3. ESQUEMA GENERAL
Calculo del Índice de Dificultad
Índice de Dificultad
Concepto Índice de Dificultad Promedio
Fórmula Grado (Criterio) de Selección
ANÁLISIS Tabla de evaluación
Criterio para el tamaño de los grupos
DE ITEMS Cálculo manual (Fórmula) (Datos Dicotómicos)
Análisis de Discriminación Multicotómicos T Student para muestras
T Student independientes (Variable ordinal) en SPSS
Validez de Juicio de Experto
Contenido Variable de Razón
V. Concurrente
Coeficiente de Correlación y Confiabilidad
Validez de
(Los ítems se aceptan o se rechazan)
VALIDEZ Criterio
V. Predictiva
V. Convergente Cálculos
Validez de Evidencias
Constructo Análisis Factorial
V. Discriminante

4. ANÁLISIS de los ÍTEMS
Índice de
Dificultad
Discriminació
n

5. ANÁLISIS DE LOS ÍTEMS
Índice de
Dificultad
Definición Grado de dificultad de un ítem.
:
Condiciones
:
Solo es aplicable a ítems de instrumentos que miden
conocimiento . Por ejemplo:
 Pruebas de aptitud.
 Pruebas de
aprovechamiento.
 Pruebas de nivel de conocimiento.
Las alternativas de respuestas deben ser
dicotómicas.
 Correcta
 Incorrecta
Suarez, J. y Rojas de Chirinos, B. (2004)

6. Índice de
Discriminació
n
El análisis de discriminación tiene como propósito determinar si
los grupos con las calificaciones mas altas y las calificaciones
mas bajas (grupo superior e inferior respectivamente), difieren
entre sí.
Suarez, J. y Rojas de Chirinos, B. (2004)
Es decir:
Si hay diferencias entre las calificaciones de ambos grupos el ítem
discrimina.
Si las calificaciones no difieren entre ambos, el ítem no discrimina,
y por lo tanto, no mide adecuadamente el constructo de estudio. En
este caso debe excluirse el instrumento.
Suarez, J. y Rojas de Chirinos, B. (2004)

7. Cálculo del
Índice de
Dificultad
ID = NRCI x Rango Interpretación
100 81 a100 Muy fácil
N
NRCI : Número de Repuestas Correctas del
61 a 80 Fácil
Items
N : Número o total de sujetos 41 a 60 Moderado
Ejemplo:
ID = 8 x 100 = 66 21 a 40 Difícil
12 0 a 20 Muy difícil
Suarez y Chirinos,
Índice Promedio o de 2004
todo el instrumento
¿Se acepta o
IDP = ∑ I D i x 100 rechaza?
total de Items
Criterio según
∑ I D I : Sumatoria de los Indices de propósito del
Discriminación de todos los items instrumento

8. Cálculo del Análisis
de Discriminación AD = NRCGSi - NRCGIi x 100
NG
NRCGSi : Número de Repuestas Correctas en el Grupo Superior en el Items
evaluado.
NRCGI i : Número de Repuestas Incorrectas en el Grupo Inferior en el Items
evaluado.
NG : Número total de integrantes del grupo
Grado Interpretación
81 a100 Muy alto
61 a 80 Alto
41 a 60 Moderado
21 a 40 Bajo
0,1 a 20 Muy Bajo
Suarez y Chirinos,
2004

9. Items
Ejemplo: Items 1 Sujetos 1 2 3 4 5 6 Total
AD = 3 - 1 x 100 = 50 a 1 1 1 1 1 1 6
b 1 1 1 1 1 1 6
4 c 0 0 1 1 1 1 5
Interpretación d 1 0 1 1 1 1 5
Grado
e 1 0 1 1 0 1 4
81 a100 Muy alto f 0 0 1 1 1 1 4
g 1 1 1 0 0 0 3
61 a 80 Alto
h 0 0 0 1 1 1 3
41 a 60 Moderado i 1 1 0 0 0 0 2
j 0 1 1 1 0 0 2
21 a 40 Bajo
k 0 0 0 0 1 1 2
0,1 a 20 Muy Bajo l 0 1 0 0 0 0 1
1: Correcta, 0: Incorrecta
Ejemplo: Items
2 ¿Cómo lo evaluamos?
AD = 2 - 3 x 100 = -
25
4

10. Análisis de
Multicótomos o T de Student SPSS
Discriminación Repuestas
múltiples
Eficiencia Análisis sobre el conjunto de repuestas incorrectas
o los distractores.
Ejemplos
Opciones 1º 2º 3º 4º
a 5 26 12 5
b 9 4 12 20
c 10 3 0 5
d 11 2 11 5
Total 35 35 35 35
Teóricamente se espera que las alternativas de
repuestas dadas a un ítems deberían distribuirse más o
menos proporcionalmente a través de las opciones.

11. REFRIGERIO

12. VA L I D E Z Definición Según Diversos Autores
• Grado en que un
instrumento realmente
mide la variable que
pretende medir.
• Es la exactitud con que
pueden hacerse
mediciones
Hernández, significativas y
Sampieri y adecuadas con un
otros (1998) instrumento, en el • La Validez tiene como
sentido de que mida propósito determinar si el
realmente el rasgo que instrumento mide
pretende medir. exactamente lo que se
quiere medir.
Ruiz Bolívar • Aplica coeficientes, pero
(2001) requiere la presencia de
evidencias.
Suarez, J. y
Rojas de Chirinos,
B. (2004)

13. VA L I D E Z Concepto de los expositores
La Validez es una cualidad
del instrumento que consiste
en demostrar empíricamente
que puede medir
exactamente la variable
objeto de estudio.

14. T I P O S D E VA L I D E Z
Contenido
Criterio
Constructo

15. Se refiere al grado en que un instrumento refleja un
VA L I D E Z D E
dominio específico de contenido de lo que se mide. Es
CONTENIDO
el grado en que la medición representa al concepto
medido.
Bohrnstedt, citado por Hernadez, Sampieri y otros
(1998)
A través de la validez de contenido se trata de determinar
hasta donde los ítems de un instrumento son representativos
del dominio o universo de contenido de la propiedad que se
desea medir.
Ruiz Bolívar (2001)
Por Ejemplo: Problemas
de resta, • Instrumento con validez
suma, de contenido
multiplicació
n y división
Prueba de
Operaciones
Aritméticas
Problema
s • Instrumento sin
validez de contenido
de resta

16. VA L I D E Z D E
CRITERIO
Determina la relación existente entre las
puntuaciones de un instrumento de medición y
una variable conocida como criterio.
Entre más se relacionen los resultados del
instrumento con el criterio, mayor será su
validez.
Ejemplo:
El rendimiento de un estudiante
en su futura carrera universitaria (criterio)
Prueba de aptitud académica (instrumento de evaluación)
Correlación de promedio de calificaciones obtenidas
con el rendimiento estudiantil (Validez de Criterio)

17. VA L I D E Z D E
CONSTRUCTO Constructo:
Definición: Mediciones indirectas de
Grado en que un instrumento
ciertas variables internas del
es una medida de un
individuo:
constructo en particular.
rasgos latentes, características
de las personas, motivación,
Suarez, J. y Rojas de
actitudes, satisfacción.
Chirinos, B.
(2004)
Ruiz Bolívar (2001)
Por Ejemplo:
• Actitud hacia la Química.
•Satisfacción o aprendizaje de la Química.
•Valoración o significado a la Química.

19. V. C o n t e n i d o (Por Juicio de experto)
Pregunta o CONGRUENCIA CLARIDAD TENDENCIOSIDAD
Ítems SI NO SI NO SI NO
1
2
3
4
5
6
7
8
Pregunta o PERTINENCIA REDACCIÓN ADECUACIÓN
Ítems Buena Regular Deficiente Buena Regular Deficiente Buena Regular Deficiente
1
2
3
4
5
6
7
8
Pregunta o
Ítems ESENCIAL ÚTIL PERO NO NECESARIO NO NECESARIO
1
2
3
4
5
6
7
8

20. RAZÓN DE
VA L I D E Z D E
Número de expertos Valor mínimo
CONTENIDO
5 0,99
Resultados 6 0,99
positivos indican
RVCi = NEE – aceptación del
7
8
0,99
0,78
items.
N/2 Negativos rechazo 9 0,75
10 0,62
N/2 11 0,59
NEE : Número de expertos que indican 12 0,56
esencial 13 0,54
N : Números de expertos 14 0,51
15 0,49
Ejemplo: RVCi = 7 – 8/2 = 0.75 20 0,42
8/2 25 0,37
30 0,33
35 0,31
40 0,29

21. Coeficiente
d e Va l i d e z d e (Coeficiente de Correlación y Confiabilidad)
Criterio Validez Concurrente: La evaluación con el criterio
externo se hace más o menos al mismo tiempo con la
aplicación del instrumento.
Validez Predictiva: El criterio esta en tiempo futuro,
Ejemplo para predecir el rendimiento académico.
rxy  (xx)(yy)
Ejemplo:
0,85  0,95 se acepta
rxy: correlación entre prueba y criterio 0,75  0,60 se
xx : confiabilidad del instrumento
yy : confiabilidad del criterio
rechaza

22. Va l i d e z d e
Constructo
Validez Convergente: Correlación entre el instrumento y con los puntajes
de otro instrumento parecido con el mismo constructo, que deberían
correlacionarse.
Validez discriminante: Correlación con puntajes de otro instrumento con
constructo poco relacionado, no deben correlacionarse.
Otras evidencias:
Homogeneidad interna; correlación items – test, mayor a 0,25
Edad; certeza que la edad de los sujetos influye. Si ocurre, tiene
validez.
Preprueba – posprueba ; Aplicación de estrategias
Grupos Diferentes.
Análisis Factorial: análisis complejo de todos los items con el
instrumento. SPSS

23. Etapas para
l a Va l i d e z d e
un Constructo
• Relación Teórica entre los Conceptos.
1
• Correlación de Conceptos y Análisis.
2
• Interpretación de la evidencia empírica de acuerdo
con el nivel en que clasifica la validez de un
3 constructo de una medición en particular.