assessment de resultados del estudiante como parte ... · continua a través del autoestudio y el...
TRANSCRIPT
Promoviendo la mejora continua de la calidad educativa
1
“Assessment de
Resultados del Estudiante
como parte integral de la
mejora continua”
03 de Abril de 2013
Promoviendo la mejora continua de la calidad educativa
2
Generalidades
Promoviendo la mejora continua de la calidad educativa
Visión y Misión de ICACIT
Promoviendo la mejora continua de la calidad educativa
4
Visión de ICACIT
Ser la entidad acreditadora de
programas de CIT en el Perú.
Ser signatario de los acuerdos de
movilidad profesional en CIT.
Ser referente en Latinoamérica y El
Caribe en temas de acreditación.
Promoviendo la mejora continua de la calidad educativa
5
Misión de ICACIT
Promover la cultura de la mejora
continua a través del autoestudio y el
entendimiento del modelo de
acreditación basado en resultados
para asegurar la calidad educativa de
los programas de CTI en el Perú.
Promoviendo la mejora continua de la calidad educativa
6
Comités Técnicos de
Acreditación de ICACIT
Comité Técnico de Acreditación
en COMPUTACIÓN
Comité Técnico de Acreditación
en INGENIERÍA
Comité Técnico de Acreditación
en TECNOLOGÍA EN
INGENIERÍA
3 programas acreditados
3 instituciones
15 programas acreditados
5 instituciones
8 programas acreditados
2 instituciones
6
102154
Promoviendo la mejora continua de la calidad educativa
7 7
Cooperación ICACIT - ABET
Promoviendo la mejora continua de la calidad educativa
8 8
Acuerdos entre ICACIT y ABET
• Memoranda of Understanding (MOU) – 2003: Para
la cooperación mutua en el aseguramiento de la
calidad de la educación en computación, ingeniería, y
tecnología.
• Adenda al MOU – 2008: Establece las políticas para
la asistencia mutua en la evaluación y acreditación de
programas en el Perú. Además establece 2 tipos de
acreditación.
Promoviendo la mejora continua de la calidad educativa
9 9
La Acreditación
Promoviendo la mejora continua de la calidad educativa
10 10
La Acreditación
La acreditación es un proceso por el
cual un programa realiza un
Autoestudio para demostrar que
satisface determinados criterios o
estándares de calidad.
Promoviendo la mejora continua de la calidad educativa
11 11
Modelo de Acreditación
Basado en Resultados
Promoviendo la mejora continua de la calidad educativa
12 12
Modelo Basado en Resultados
Antes del EC2000:
Se usaban criterios prescriptivos de ~30
páginas para acreditar programas (Sílabos
de cursos, número de grados académicos
del cuerpo de profesores, áreas de salas de
clase y oficinas, cantidad de dinero gastado
en equipos/instrumentos de laboratorio, etc.)
Promoviendo la mejora continua de la calidad educativa
13 13
Modelo Basado en Resultados
A partir de 2001 (EC2000):
Los criterios requieren que, el programa
“mida” algo más relevante: lo que sus
graduados saben y son capaces de hacer
(conocimientos, habilidades y
comportamientos).
El actual modelo promueve la innovación en
la educación superior.
Promoviendo la mejora continua de la calidad educativa
14 14
Los Criterios de
Acreditación
Promoviendo la mejora continua de la calidad educativa
15 15
Definiciones 2012-13 (1)
• Objetivos Educacionales del
Programa (OEP): Son declaraciones
generales que describen lo que se espera
que los graduados alcancen algunos años
después de la graduación. Los objetivos
educacionales están basados en las
necesidades de los constituyentes del
programa.
Promoviendo la mejora continua de la calidad educativa
16 16
Definiciones 2012-13 (2)
• Resultados del Estudiante (RE):
Describen lo que el estudiante debe saber y
ser capaz de hacer al momento de la
graduación. Estos se relacionan con las
habilidades, conocimiento y comportamientos
que los estudiantes adquieren a lo largo de su
progreso en el programa.
Promoviendo la mejora continua de la calidad educativa
17 17
Objetivos y Resultados
Declaración de
la Misión
Objetivos
Educacionales
Resultados del
Estudiante
Promoviendo la mejora continua de la calidad educativa
18 18
Criterios de Acreditación
Generales (idénticos para todos los programas)
Criterios del 1 al 8
Programa (específicos para cada programa)
Criterio 9
Promoviendo la mejora continua de la calidad educativa
19 19
Criterios de Acreditación
1. Estudiantes
2. Objetivos Educacionales del Programa
3. Resultados del Estudiante
4. Mejora Continua
5. Plan de Estudios
6. Cuerpo de Profesores
7. Instalaciones
8. Apoyo Institucional
9. Criterios del Programa
Promoviendo la mejora continua de la calidad educativa
20 20
Assessment y Evaluación
de Resultados del
Estudiante
Promoviendo la mejora continua de la calidad educativa
21 21
Definiciones 2012-13 (1)
• Resultados del Estudiante (RE): Son
declaraciones breves que describen lo que el
estudiante debe saber y ser capaz de hacer al
momento de la graduación. Estos se
relacionan con las habilidades, conocimiento
y comportamientos que los estudiantes
adquieren a lo largo de su progreso en el
programa.
Promoviendo la mejora continua de la calidad educativa
22 22
Definiciones 2012-13 (2)
• Assessment (1): Consiste en uno o más
procesos en los que se identifica, recopila y
prepara información para evaluar el logro de
los resultados del estudiante y los objetivos
educacionales del programa. (…)
Promoviendo la mejora continua de la calidad educativa
23 23
Definiciones 2012-13 (3)
• Assessment (2): (…) Un assessment
efectivo utiliza medidas directas, indirectas,
cualitativas y cuantitativas según el objetivo o
resultado que se está midiendo. Métodos
apropiados de muestreo pueden ser usados
como parte de un proceso de assessment.
Promoviendo la mejora continua de la calidad educativa
24 24
Definiciones 2012-2013 (4)
• Evaluación: Consiste en uno o más
procesos destinados a interpretar la
información y las evidencias acumulados
mediante los procesos de assessment. La
evaluación determina la medida en que los
resultados del estudiante y los objetivos
educacionales están siendo logrados. La
evaluación da lugar a decisiones y acciones
para mejorar el programa.
Promoviendo la mejora continua de la calidad educativa
25 25
Assessment y Evaluación
Organización
Información
Identificación de
datos
Recolección
Interpretación
Decisiones
Acciones
Mejora
Promoviendo la mejora continua de la calidad educativa
26 26
¿Qué dice el Criterio 3?
• El programa debe tener REs documentados
que preparen a los graduados para el logro de
sus OEPs.
• Los REs son de la (a) a la (?) además de todo
resultado adicional que pueda ser articulado
por el programa.
• (a) – (k) para ingeniería, tecnología en ingeniería
• (a) – (i) para computación
Promoviendo la mejora continua de la calidad educativa
27 27
¿Qué dice el Criterio 4?
• El programa debe usar regularmente procesos
documentados y apropiados en el assessment y
evaluación de la medida en que los REs están siendo
alcanzados.
• Los resultados de estas evaluaciones deben ser
utilizados sistemáticamente como contribución para la
mejora continua del programa.
• Otra información disponible puede también usarse
para ayudar en la mejora continua del programa.
Promoviendo la mejora continua de la calidad educativa
28 28
Criterio 4: Importante
• Este criterio se aplica en un sentido holístico.
• El proceso de assessment y evaluación necesita
demostrar el grado en que los REs están siendo
logrados, pero no hay nada que indique:
• Todos los REs deben lograrse en el mismo grado.
• Nada sobre la escala numérica usada en la
medición de logro.
Promoviendo la mejora continua de la calidad educativa
29 29
Criterio 4: Casos frecuentes (1)
• El programa ha estado implementando
cambios, pero ninguno está relacionado a los
resultados de los procesos de assessment de
PEOs y REs.
• Un programa ha re-escrito los REs y los está
midiendo, pero su lista no incluye todos los
Res del Criterio 3.
Promoviendo la mejora continua de la calidad educativa
30 30
Criterio 4: Casos frecuentes (2)
• ¿Cuándo sabemos que la información es apropiada
para el assessment?
• ¿Todo tiene que ser medición directa? (NO)
• ¿Puede usarse información subjetiva? (Si, algunas
veces. Pero la evaluación no debería basarse solo en
información subjetiva)
• ¿Las evidencias sobre cada RE tienen que ser
necesariamente muestras de trabajos producidos
por los estudiantes? (No, pero el equipo necesita estar
convencido de que el nivel de logro de los REs ha sido
determinado)
Promoviendo la mejora continua de la calidad educativa
31 31
Assessment a Nivel de Programa (1)
• Propósito: Recopilar información a través del plan de
estudios básico y de los constituyentes externos con el
objetivo final de evaluar el logro de los RE y OEP.
Objetivos
Educacionales
del Programa
Resultados del
Estudiante
Indicadores de
Desempeño
Promoviendo la mejora continua de la calidad educativa
32 32
Assessment a Nivel de Programa (2)
• No puede abarcar todos los tópicos relacionados a una
materia.
• No puede abarcar todas las habilidades relacionadas a
cada tópico.
• Toma de decisiones basada en el contexto del curso y
las características de los estudiantes.
• El desempeño se mide a nivel de habilidades.
Promoviendo la mejora continua de la calidad educativa
33 33 33
Mejora Continua del Programa Gloria Rogers – ABET, Inc.
Misión Objetivos
Educacionales del Programa
Resultados del Estudiante
Medir/ evaluar
Constituyentes Feedback para la mejora continua
Indicadores de Desempeño
Prácticas y estrategias
educativas
Evaluación: Interpretación de
la evidencia
Assessment: Recopilación, y organización de
evidencias
Promoviendo la mejora continua de la calidad educativa
34 34
Objetivo
Educacional del
Programa
Resultados del
Estudiante
Indicadores de
Desempeño
Nuestros graduados
trabajarán
exitosamente como
miembros de un
equipo profesional
para abordar
problemas del mundo
real.
Los estudiantes
demostrarán:
* La capacidad de
identificar, formular y
resolver problemas
complejos.
* La capacidad de
desenvolverse
eficazmente en un
equipo.
…
Promoviendo la mejora continua de la calidad educativa
35 35
Objetivo
Educacional del
Programa
Resultados del
Estudiante
Indicadores de
Desempeño
Nuestros graduados
trabajarán
exitosamente como
miembros de un
equipo profesional
para abordar
problemas del mundo
real.
Los estudiantes
demostrarán:
* La capacidad de
desenvolverse
eficazmente en un
equipo.
* Recopilar
información
* Cumplir con los
deberes de su rol en
el equipo
* Compartir el
trabajo del equipo
* Escuchar a otros
miembros del equipo
Promoviendo la mejora continua de la calidad educativa
36 36
Indicadores de Desempeño
• Articulan las características claves de un
Resultado del Estudiante.
• Permiten a los profesores “reconocer un
resultado a simple vista”.
Promoviendo la mejora continua de la calidad educativa
37 37
Atributos de los Indicadores de
Desempeño
1. Referencia de Contenido: Contenido de la
asignatura donde se enfoca la instrucción (pasos
para el proceso de diseño, reacción química,
método científico, etc.)
2. Verbo de Acción: Indica el desempeño específico
(“enumerar”, “analizar”, “aplicar”, etc.)
3. Términos de Valor: Vienen después con una
escala y descriptores en la forma de rúbricas
(eficazmente, precisamente, completamente, etc.)
Promoviendo la mejora continua de la calidad educativa
38 38
Indicadores de Desempeño
• Resultado: Los estudiantes demostrarán la
capacidad para identificar, formular y resolver
problemas de computación.
• Indicadores de Desempeño: Los estudiantes son
capaces de…
• Identificar variables clave.
• Reconocer la necesidad de múltiples soluciones.
• Analizar alternativas de solución para un
problema de computación.
• Justificar una solución para un problema de
computación.
Promoviendo la mejora continua de la calidad educativa
39 39
Indicadores de Desempeño
• Resultado: Los estudiantes tendrán la capacidad de
conducir un experimento e interpretar datos.
• Indicadores de Desempeño: Los estudiantes son
capaces de…
• Seguir el plan de diseño del experimento.
• Obtener datos sobre variables apropiadas.
• Comparar datos y resultados experimentales con
modelos teóricos apropiados.
• Explicar las diferencias observadas entre el
modelo y el experimento.
Promoviendo la mejora continua de la calidad educativa
40 40
Objetivo
Educacional del
Programa
Resultados del
Estudiante
Indicadores de
Desempeño
Nuestros graduados
trabajarán
exitosamente como
miembros de un
equipo profesional
para abordar
problemas del mundo
real.
Los estudiantes
demostrarán:
* La capacidad de
desenvolverse
eficazmente en un
equipo.
* Recopilar
información
* Cumplir con los
deberes de su rol en
el equipo
* Compartir el
trabajo del equipo
* Escuchar a otros
miembros del equipo
Promoviendo la mejora continua de la calidad educativa
41 41
Promoviendo la mejora continua de la calidad educativa
42 42
Promoviendo la mejora continua de la calidad educativa
43 43
Métodos de Assessment
• Siempre habrá más de una forma de medir un
resultado del estudiante.
• Ningún método es bueno para medir una gran
variedad de diferentes habilidades de los
estudiantes.
• Es fundamental hacer una prueba piloto para
ver si un método es apropiado para un
determinado resultado y para su programa.
Promoviendo la mejora continua de la calidad educativa
44 44
Recordemos que:
• Todos los métodos de assessment tiene
ventajas y desventajas.
• Un método “ideal” es aquel que mejor se
ajusta a las necesidades del programa, la
validación satisfactoria y costo asequible.
• Mejores prácticas: Es crucial utilizar un
enfoque de múltiples métodos y fuentes para
maximizar la validez y reducir el sesgo de
cualquier enfoque.
Promoviendo la mejora continua de la calidad educativa
45 45
Rúbrica
Resultado: La capacidad de desenvolverse eficazmente en un equipo
Nivel de
Desempeño
A
Nivel de
Desempeño
B
Nivel de
Desempeño
C
Nivel de
Desempeño
D
Indicador de
Desempeño 1 Descriptor 1a Descriptor 1b Descriptor 1c Descriptor 1d
Indicador de
Desempeño 2 Descriptor 2a Descriptor 2b Descriptor 2c Descriptor 2d
Indicador de
Desempeño 3 Descriptor 3a Descriptor 3b Descriptor 3c Descriptor 3d
Promoviendo la mejora continua de la calidad educativa
46 46
Promoviendo la mejora continua de la calidad educativa
47 47
Resultado del Estudiante Q: La capacidad de diseñar un sistema, componente o proceso para satisfacer las necesidades deseadas
considerando restricciones realistas tales como económicas, ambientales, sociales, políticas, éticas, sanitarias y de seguridad,
fabricación y sostenibilidad.
Indicadores de Desempeño Cursos Métodos
Assessment
Cursos para
la recolección
de datos
Duración
del ciclo de
assessment
Año (s) /
semestre de
recolección de
datos
Objetivo por
rendimiento
1. Producir una clara declaración de las
necesidades en un proyecto de diseño.
1010, 1015,
1011, 2020,
2040, 2060,
3010, 3013,
3050, 4090, 4092
Rúbricas de un
proyecto de diseño
Encuestas superiores
4090 (Ing Dis II)
Encuesta en
línea
3 años 2005, 2008 85%
2. Identificar las restricciones sobre el
proyecto de diseño y establecer criterios
para la viabilidad y conveniencia de las
soluciones.
1010, 1015,
1011, 2020,
2040, 2060,
3010, 3013,
3050, 4090, 4092
Rúbricas de un
proyecto de diseño
Encuestas superiores
4090 (Ing Dis II)
Encuesta en
línea
3 años 2005, 2008 85%
3. Proponer la solución más económica /
deseable y justificar el enfoque.
1010, 1015,
1011, 2020,
2040, 2060,
3010, 3013,
3050, 4090, 4092
Rúbricas de un
proyecto de diseño
Encuestas superiores
4090 (Ing Dis II)
Encuesta en
línea
3 años 2005, 2008 85%
Promoviendo la mejora continua de la calidad educativa
48 48
Resumen:
• Tener claro el objetivo del uso de una determinada
rúbrica.
• Las rúbricas no son requeridas para los resultados,
pero representan una buena práctica de medición
directa de resultados.
• Las rúbricas pueden guiar al cuerpo de profesores en
el proceso de assessment y ayudar a identificar
fortalezas y debilidades en el desempeño de los
estudiantes relacionadas a indicadores de
desempeño específicos.
Promoviendo la mejora continua de la calidad educativa
49 49
¿Preguntas?
Promoviendo la mejora continua de la calidad educativa
50 50
Gracias por su atención