UNIVERSIDAD PEDAGÓGICA EXPERIMENTAL LIBERTADORINSTITUTO PEDAGÓGICO DE BARQUISIMETO

LUIS BELTRÁN PRIETO FIGUEROASUBDIRECCIÓN DE INVESTIGACIÓN Y POSGRADO

MAESTRÍA EN EDUCACIÓNMENCIÓN ENSEÑANZA DE LA QUÍMICA

Validez y confiabilidad

de Instrumentos

de Investigación Educativa

PARTICIPANTES: OROPEZA ALISMAR

CABRE ELIAS SAMIR

GUEVARA FRANCISCO

CURSO: Instrumentos de Recolección de

Datos

FACILITADORA: Profa. ANA Y. ALVARADO

Noviembre de 2011

ESQUEMA GENERAL

VALIDEZValidez de Criterio

Índice de Dificultad ConceptoFórmulaTabla de evaluación

Análisis de DiscriminaciónT Student

Criterio para el tamaño de los gruposCálculo manual (Fórmula) (Datos Dicotómicos)Multicotómicos T Student para muestras independientes (Variable ordinal) en SPSS

Juicio de ExpertoVariable de Razón

ANÁLISIS

DE ITEMS

Calculo del Índice de DificultadÍndice de Dificultad PromedioGrado (Criterio) de Selección

Validez de Constructo

Validez de Contenido

V. Concurrente

V. Predictiva

V. Convergente

V. Discriminante

Coeficiente de Correlación y Confiabilidad(Los ítems se aceptan o se rechazan)

CálculosEvidencias Análisis Factorial

ANÁLISIS de los ÍTEMS

Índ ice de

Di f icu l tad

D i s c r i m i n a c i ó

n

Índ ice de

Di f icu l tad

Pruebas de nivel de conocimiento.

Las alternativas de respuestas deben ser

dicotómicas.

Correcta

IncorrectaSuarez, J. y Rojas de Chirinos, B. (2004)

Condiciones

:Solo es aplicable a ítems de instrumentos que miden

conocimiento . Por ejemplo:

Pruebas de

aprovechamiento.

Pruebas de aptitud.

Grado de dificultad de un ítem.Definición

:

ANÁLISIS DE LOS ÍTEMS

Índ ice de

Discr iminació

n

El análisis de discriminación tiene como propósito determinar si

los grupos con las calificaciones mas altas y las calificaciones

mas bajas (grupo superior e inferior respectivamente), difieren

entre sí.

Suarez, J. y Rojas de Chirinos, B. (2004)

Es decir:

Si hay diferencias entre las calificaciones de ambos grupos el ítem

discrimina.

Si las calificaciones no difieren entre ambos, el ítem no discrimina,

y por lo tanto, no mide adecuadamente el constructo de estudio. En

este caso debe excluirse el instrumento.

Suarez, J. y Rojas de Chirinos, B. (2004)

ID = NRCI x 100

N

Cálcu lo de l

Índ ice de

Di f i cu l tad

Rango Interpretación

81 a100 Muy fácil

61 a 80 Fácil

41 a 60 Moderado

21 a 40 Difícil

0 a 20 Muy difícil

Suarez y Chirinos,

2004Índice Promedio o de

todo el instrumento

IDP = ∑ I D i x 100

total de Items

∑ I D I : Sumatoria de los Indices de

Discriminación de todos los items

NRCI : Número de Repuestas Correctas del

Items

N : Número o total de sujetosEjemplo:ID = 8 x 100 = 66

12

Criterio segúnpropósito del instrumento

¿Se acepta o

rechaza?

Cálculo del Análisis de Discriminación AD = NRCGSi - NRCGIi x 100

NG

Grado Interpretación

81 a100 Muy alto

61 a 80 Alto

41 a 60 Moderado

21 a 40 Bajo

0,1 a 20 Muy BajoSuarez y Chirinos,

2004

NRCGSi : Número de Repuestas Correctas en el Grupo Superior en el Items

evaluado.

NRCGI i : Número de Repuestas Incorrectas en el Grupo Inferior en el Items

evaluado.

NG : Número total de integrantes del grupo

Ejemplo: Items

2AD = 2 - 3 x 100 = -

254

Items

Sujetos 1 2 3 4 5 6 Total

a 1 1 1 1 1 1 6

b 1 1 1 1 1 1 6

c 0 0 1 1 1 1 5

d 1 0 1 1 1 1 5

e 1 0 1 1 0 1 4

f 0 0 1 1 1 1 4

g 1 1 1 0 0 0 3

h 0 0 0 1 1 1 3

i 1 1 0 0 0 0 2

j 0 1 1 1 0 0 2

k 0 0 0 0 1 1 2

l 0 1 0 0 0 0 1

1: Correcta, 0: Incorrecta

Grado Interpretación

81 a100 Muy alto

61 a 80 Alto

41 a 60 Moderado

21 a 40 Bajo

0,1 a 20 Muy Bajo

AD = 3 - 1 x 100 = 504

Ejemplo: Items 1

¿Cómo lo eva luamos?

Análisis de Discriminación

Multicótomos o

Repuestas

múltiples

T de Student SPSS

Eficiencia Análisis sobre el conjunto de repuestas incorrectas

o los distractores.

Ejemplos

Opciones 1º 2º 3º 4º

a 5 26 12 5

b 9 4 12 20

c 10 3 0 5

d 11 2 11 5

Total 35 35 35 35

Teóricamente se espera que las alternativas de

repuestas dadas a un ítems deberían distribuirse más o

menos proporcionalmente a través de las opciones.

REFRIGERIO

• Grado en que uninstrumento realmentemide la variable quepretende medir.

Hernández, Sampieri y otros (1998)

• Es la exactitud con quepueden hacersemedicionessignificativas yadecuadas con uninstrumento, en elsentido de que midarealmente el rasgo quepretende medir.

Ruiz Bolívar (2001)

• La Validez tiene comopropósito determinar si elinstrumento mideexactamente lo que sequiere medir.

• Aplica coeficientes, perorequiere la presencia deevidencias.

Suarez, J. y Rojas de Chirinos, B. (2004)

VALIDEZ Definición Según Diversos Autores

VALIDEZ Concepto de los expositores

La Validez es una cualidad

del instrumento que consiste

en demostrar empíricamente

que puede medir

exactamente la variable

objeto de estudio.

TIPOS DE VALIDEZ

Cr i ter io

Constructo

Contenido

VAL I D E Z D E

C O N T E N I D O

Se refiere al grado en que un instrumento refleja un

dominio específico de contenido de lo que se mide. Es

el grado en que la medición representa al concepto

medido.

Bohrnstedt, citado por Hernadez, Sampieri y otros

(1998)A través de la validez de contenido se trata de determinar

hasta donde los ítems de un instrumento son representativos

del dominio o universo de contenido de la propiedad que se

desea medir.

Ruiz Bolívar (2001)

Problemas de resta,

suma, multiplicación y división

• Instrumento con validez de contenido

Problemas

de resta

• Instrumento sin validez de contenido

Prueba de

Operaciones

Aritméticas

Por Ejemplo:

VAL I D E Z D E

C R I T E R I O

Determina la relación existente entre las puntuaciones de un instrumento de medición y

una variable conocida como criterio.

Entre más se relacionen los resultados del instrumento con el criterio, mayor será su

validez.

Ejemplo:

El rendimiento de un estudiante

en su futura carrera universitaria (criterio)

Prueba de aptitud académica (instrumento de evaluación)

Correlación de promedio de calificaciones obtenidas

con el rendimiento estudiantil (Validez de Criterio)

VAL I D E Z D E

C O N S T R U C T O

Definición:Grado en que un instrumento

es una medida de un

constructo en particular.

Suarez, J. y Rojas de

Chirinos, B.

(2004)

Mediciones indirectas de

ciertas variables internas del

individuo:

rasgos latentes, características

de las personas, motivación,

actitudes, satisfacción.

Ruiz Bolívar (2001)

Constructo:

• Actitud hacia la Química.

•Satisfacción o aprendizaje de la Química.

•Valoración o significado a la Química.

Por Ejemplo:

V. Contenido

Pregunta o

Ítems

PERTINENCIA REDACCIÓN ADECUACIÓN

Buena Regular Deficiente Buena Regular Deficiente Buena Regular Deficiente

1

2

3

4

5

6

7

8

Pregunta o

ÍtemsCONGRUENCIA CLARIDAD TENDENCIOSIDAD

SI NO SI NO SI NO

1

2

3

4

5

6

7

8

Pregunta o

Ítems ESENCIAL ÚTIL PERO NO NECESARIO NO NECESARIO

1

2

3

4

5

6

7

8

(Por Juicio de experto)

R AZ Ó N D E

VAL I D E Z D E

C O N T E N I D O

RVCi = NEE –

N/2

N/2NEE : Número de expertos que indican

esencial

N : Números de expertos

Resultados

positivos indican

aceptación del

items.

Negativos rechazo

Número de expertos Valor mínimo

5 0,99

6 0,99

7 0,99

8 0,78

9 0,75

10 0,62

11 0,59

12 0,56

13 0,54

14 0,51

15 0,49

20 0,42

25 0,37

30 0,33

35 0,31

40 0,29

Ejemplo: RVCi = 7 – 8/2 = 0.75

8/2

Coef ic iente

de Val idez de

Cr i ter io

rxy: correlación entre prueba y criterio

xx : confiabilidad del instrumento

yy : confiabilidad del criterio

rxy (xx)(yy) Ejemplo:

0,85 0,95 se acepta

0,75 0,60 se

rechaza

Validez Concurrente: La evaluación con el criterio

externo se hace más o menos al mismo tiempo con la

aplicación del instrumento.

Validez Predictiva: El criterio esta en tiempo futuro,

Ejemplo para predecir el rendimiento académico.

(Coeficiente de Correlación y Confiabilidad)

Val idez de

Const ructo

Validez discriminante: Correlación con puntajes de otro instrumento con

constructo poco relacionado, no deben correlacionarse.

Validez Convergente: Correlación entre el instrumento y con los puntajes

de otro instrumento parecido con el mismo constructo, que deberían

correlacionarse.

Otras evidencias:

Homogeneidad interna; correlación items – test, mayor a 0,25

Edad; certeza que la edad de los sujetos influye. Si ocurre, tiene

validez.

Preprueba – posprueba ; Aplicación de estrategias

Grupos Diferentes.

Análisis Factorial: análisis complejo de todos los items con el

instrumento. SPSS

Etapas para

la Va l idez de

un Constructo

1• Relación Teórica entre los Conceptos.

2• Correlación de Conceptos y Análisis.

3

• Interpretación de la evidencia empírica de acuerdo con el nivel en que clasifica la validez de un constructo de una medición en particular.