presentación tesina enero 2011

LOS PROCESOS FORMATIVOS EN LAS EMPRESAS: EVALUACIÓN DEL APRENDIZAJE Y SU IMPACTO EN EL PUESTO DE TRABAJO

Investigador: Francisco José García AguileraDepartamento: Métodos de Investigación e Innovación Educativa de la Facultad de Ciencias de la Educación..Tutor: Eduardo Elósegui Bandera.Programa de Doctorado: Investigación e Innovación Educativa.Bienio 2008-2010.

LOS PROCESOS FORMATIVOS EN LAS EMPRESAS: EVALUACIÓN DEL APRENDIZAJE Y SU IMPACTO EN EL

PUESTO DE TRABAJO


MARCOCONCEPTUAL

1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Introducción

Marco teórico

Revisión de la literatura

2.

1.

3.

PROBLEMA, OBJETIVOS,

DISEÑO E INSTRUMENTOS

ANÁLISIS Y CONCLUSIONES

Planteamiento del problema

Objetivos

Diseño Metodológico.

Instrumentos

5.

4.

6.

7.

9.

8.

10.

11.

Análisis de datos.

Consecución de objetivos

Conclusiones y aportaciones

Dificultades encontradas.

PUBLICACIONES, LÍNEAS

FUTURAS, BIBLIOGRAFÍA Y

ANEXOS

13.

12.

14.

15.

Publicaciones científicas y difusión de la investigación

Líneas de investigación futuras

Bibliografía consultada

Anexos documentales


1. 2. 3.

Introducción: contexto de la evaluación en formación de profesionales

4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Marco teórico de la investigación




Para el desarrollo de la investigación propuesta, tomamos la determinación, a la hora de definir este proyecto, tener en cuenta el cómo se desarrolla el proceso de evaluación de realidades formativas centradas en el ámbito profesional, utilizando el contexto de una empresa real.

Nuestro estudio se centra en una organización denominada Andalucía Emprende, Fundación Pública Andaluza, entidad instrumental de la Junta de Andalucía y que actualmente posee una doble dependencia, la Consejería de Empleo, y a la Consejería de Economía, Innovación y Ciencia.


1. 2. 3.


4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.



El curso seleccionado, es el curso de Experto Universitario en Asesoramiento a Emprendedores, formación realizada en exclusiva para esta organización por dos entidades: La Universidad Internacional de Andalucía y el Programa EVA (Red de Espacios Tecnológicos de Andalucía).

Dicho curso, se ha realizado como pilotaje, con el objetivo de mejorar las competencias de los responsables técnicos de Andalucía Emprende en su labor como asesores de los emprendedores de Andalucía.

Si los resultados de evaluación y el impacto suponen la mejora de las competencias de estos profesionales, dicha formación se extenderá a todos los profesionales de esta misma categoría.


1. 2. 3.


4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.



El curso objeto de estudio, posee las características idóneas para su análisis, puesto que está dirigido a profesionales, trabaja competencias de conocimiento y habilidad, combina metodologías didácticas (24 módulos presenciales y virtuales a través de una plataforma de teleformación Moodle) y su duración (un curso académico completo) permiten aplicar el modelo de Kirkpatrick en todas sus fases y niveles.

Por tanto, nuestra investigación de carácter descriptiva o confirmatoria, tratará de aplicar un modelo concreto de evaluación, llevarlo a cabo en una realidad concreta, definir instrumentos para evaluar dicha realidad y obtener unos resultados que nos permitan legitimar una formación e influir en la toma de decisiones real en el seno de una organización empresarial.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.




La fase de evaluación de un curso, es clave dentro del proceso de enseñanza y aprendizaje, por tanto será necesario contar con un sistema de evaluación que contribuya a garantizar unas cotas mínimas de calidad, orientadas a asegurar una óptima satisfacción del curso.

Existen numerosos métodos y técnicas de evaluación de la formación. En este caso, por tratarse de una de las propuestas más completas e integradoras, hemos optado por aplicar el modelo de evaluación formulado por Donald Kirkpatrick (1999). Vamos a explicar brevemente en qué consiste el citado Modelo.


1. 2. 3.


4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.








Mod

elo

de K

irkp

atri

ck

En este nivel se pretende obtener datos durante y/o después del proceso formativo sobre las opiniones de los individuos que han participado en el curso.

En el segundo nivel se pretende saber los conocimientos adquiridos por parte de los participantes. De este modo, la evaluación se centrará por igual tanto en los conocimientos teóricos como en las habilidades prácticas.


1. 2. 3.


4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.








Mod

elo

de K

irkp

atri

ck

En este nivel se evalúa cómo los participantes del proceso formativo ponen en práctica los conocimientos y habilidades adquiridas en el contexto laboral.

Este nivel se fija en el retorno de la inversión realizada. Para evaluar este nivel, debemos dejar pasar cierto tiempo para alcanzar los resultados. Va a ser decisivo para la toma de decisiones.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Planteamiento del problema de investigación.

Objetivos de la investigación.

Diseño Metodológico: adaptación del modelo de Kirkpatrick y dimensiones de la evaluación en cada nivel

Instrumentos utilizados para la recogida de información.

El problema parte en la necesidad de localizar una formación especializada que se adapte a la naturaleza de unos puestos de trabajo como son los de los Responsables Técnicos de esta fundación, y que debido a sus tareas de asesoramiento a emprendedores en Andalucía, deben estar en continua actualización. Por lo tanto el problema de investigación en este caso sería ¿Cuál es la valoración de la formación que recibe el colectivo de Responsables Técnicos de Andalucía Emprende, en relación a la mejora de las competencias de asesoramiento a empresas y emprendedores?


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.





Objetivo general:

1.Aplicar una metodología (modelo de evaluación de Kirkpatrick, 1999) que permita valorar la adecuación de los contenidos formativos a la mejora de las competencias de asesoramiento a empresas y emprendedores de estos perfiles profesionales (Responsables técnicos de Andalucía Emprende).

Objetivos específicos:

a)Demostrar la importancia crucial de la evaluación del aprendizaje en la mejora de las competencias de los profesionales en su puesto de trabajo.b)Aplicar el modelo de Kirkpatrick, como estrategia de evaluación al caso concreto de una organización empresarial.c)Identificar instrumentos adaptados a las nuevas realidades formativas y modalidades de formación en las organizaciones empresariales.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.





Mod

elo

de K

irkp

atri

ck

En este nivel se evalúa el grado de satisfacción inmediato percibido por los diferentes agentes que intervienen en el desarrollo del curso (alumnos/as, tutores/as y dinamizadores/ras).

Alumnado evalúa:

- Organización del curso, aprendizaje del alumnado y contenidos .

Dimensión pedagógica y organizativa:

Dimensión tecnológica: Plataforma de teleformación.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.





Mod

elo

de K

irkp

atri

ck

Dimensión acción tutorial y labor de dinamización: cómo han desarrollado su labor tutores y dinamizadores.

Dimensión sesiones presenciales: desde el nivel de adecuación de las instalaciones, los contenidos abordados y las actividades realizadas.

Dimensión de satisfacción y expectativas: valoración global sobre el nivel de calidad del curso.

- Organización del curso. - Plataforma virtual. -Perfil del alumnado.

Tutores evalúan:

-Soporte didáctico (dinamización). -Resolución de incidencias técnicas. - Satisfacción general en el curso.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.





Mod

elo

de K

irkp

atri

ck

- Aspectos organizativos.- Plataforma virtual. - Interacción con el alumnado. - Coordinación con equipo de tutores. - Grado de satisfacción general en el curso.

Dinamizadore/s evalúan:

Responsable del curso evalúa:

- Desarrollo general del curso.

- Problemas/incidencias y propuestas de mejora.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.





Mod

elo

de K

irkp

atri

ck

La evaluación de este nivel de aprendizaje la realiza el tutor al alumnado en base a las siguientes dimensiones:

-Actividades individuales. Repercute un 30% en la calificación.- Actividades grupales. Repercute un 40% en la calificación.- Participación en plataforma Repercute un 20% en la calificación.-Evaluación cualitativa. Nivel de implicación, interés, actitud, motivación… del alumnado (Repercute un 10% en la calificación).- Calificación conforme a la valoración de todos los apartados anteriores.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.





Mod

elo

de K

irkp

atri

ck

- Aplicabilidad práctica: puesta en práctica por el profesional de los conocimientos y habilidades del curso.

-Entorno Laboral: Aspectos relacionados con el contexto de trabajo en el que el profesional desempeña sus funciones que pueden estar facilitando o no la aplicación práctica de lo aprendido en el curso.

-Mejora en el servicio: Nivel de mejora en la eficacia percibida por el profesional en el desempeño de sus funciones.

- Modalidad de formación: valoración de si ha contribuido a que el alumnado ponga en práctica los conocimientos y habilidades.

Las dimensiones de estos niveles son:


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.





Mod

elo

de K

irkp

atri

ck

ALUMNADO – TUTOR - DINAMIZADOR – RESPONSABLE DE LA curso

Escalas likert y cuestionarios con preguntas abiertas según el agente evaluador.

Tenéis los modelos de cuestionarios para identificar las dimensiones evaluadas y los ítems para cada una de ellas.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.



Mod

elo

de K

irkp

atri

ck

Cuestionarios y tareas.

Lección: Permite estudiar un tema (contenido) a través de un sistema de “enseñanza programada”.



Foro: que obliga a los participantes a pensar, reflexionar y madurar sus aportaciones.

Wikis y Blogs :para crear y compartir conocimiento.

Chat, mensajería electrónica, clase virtual o videoconferencia.

Para las sesiones presenciales diferentes dinámicas de grupo y técnicas participativas.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.



Mod

elo

de K

irkp

atri

ck Cuestionario de “Valoración de aplicabilidad de competencias profesionales”. Este cuestionario consta de siete ítems de diferente naturaleza.



Para el diseño de los instrumentos, hemos empleado en algunos casos, escalas y/o ítems ya validados, utilizados en otros cursos.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Ejemplos: Instrumentos utilizados para la recogida de información.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Análisis de datos.

Consecución de objetivos de la investigación.

Conclusiones y aportaciones del proyecto.


Nivel Satisfacción: Alumnado

Presentamos los resultados más representativos:

Coherencia entre objetivos y contenidosDe acuerdo (3) Muy de acuerdo (4)

100%

Visión práctica de las actividades propuestas.Útil (3) Muy útil (4)

100%

Duración del curso.De acuerdo (3) Muy de acuerdo (4)

83,33 %

Diseño y desarrollo de contenidos ad hoc para el curso.

De acuerdo (3) Muy de acuerdo (4)

95,83%

Estrategias didácticas para fomentar la colaboración.

Adecuada (3) Muy Adecuada (4)

95,65%

Metodología didáctica en talleres presenciales.Adecuada (3) Muy Adecuada (4)

77%


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Análisis de datos.




Satisfacción: Tutores

Organización del curso, las herramientas y recursos para la tutorización y el soporte didáctico aportado.

Adecuada (3) Muy Adecuada (4)

100%

Perfil del alumnado.Adecuada (3) Muy Adecuada (4)

89%

Coordinación equipo tutores.Adecuada (3) Muy Adecuada (4)

78%

Satisfacción: Dinamizadora

Organización del curso, herramientas y recursos de la plataforma, interacción con el alumnado, coordinación del equipo docente.

Muy Adecuada (4)

100%

Nivel Satisfacción: Tutores y dinamizadora.Presentamos los resultados más

representativos:


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Análisis de datos.




El 100 % del alumnado considera que el curso se ha ajustado a su nivel de conocimientos previos.

El 100 % del alumnado manifiesta que la curso se ha centrado en áreas de conocimiento que le interesan.

El 100 % del alumnado participante, coincide en señalar que lo que ha aprendido en el curso le ayudará a mejorar su práctica profesional.

Todo el alumnado participante (100 %) señala que ha podido participar activamente en el curso.

Nivel Aprendizaje: alumnado.



1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Análisis de datos.




Nivel Transferencia e Impacto:

Realizamos un análisis conjunto, debido a la relación directa que existe entre los indicadores que se miden en los dos niveles, la repercusión del aprendizaje y su alcance en el puesto de trabajo. El cuestionario pertinente se ha realizado vía telefónica, tres meses después de la finalización de la curso.

El 100% del alumnado ha calificado con una nota igual o superior a 7 la puesta en práctica en su contexto laboral lo que aprendió en la curso. La media total es de un 8,26.

El 95% considera que la actitud abierta y flexible del entorno laboral le ha facilitado la aplicación de lo aprendido en el curso.

El 100% del alumnado considera que lo aprendido en el curso ha ayudado a mejorar la calidad del servicio.

En cuanto al impacto como retorno de la inversión realizada por la fundación, los costes que han resultado de la realización del curso de experto, cifrados en 66.000 euros (29.000 € de costes de diseño de la curso y 37.000 € el coste de impartición) supone, que gracias a los resultados de transferencia obtenidos, van a realizarse al menos tres nuevas ediciones,



1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Análisis de datos.




Con referencia al objetivo general y al primero de los objetivos específicos, hemos podido comprobar la mejora producida en las competencias de los profesionales que participan en el curso. En lo que respecta al segundo objetivo, podemos afirmar que se ha llevado a cabo la aplicación del Modelo de Kirkpatrick a través de los distintos instrumentos descritos y su relación directa con cada uno de los niveles a evaluar.

En cuanto al tercer objetivo , decir que hemos identificado instrumentos para la evaluación en cada nivel, además de que ha quedado validada la utilización de los mismos para la evaluación del aprendizaje en realidades empresariales a nivel más general, teniendo en cuenta la modalidad de formación mixta propuesta en este estudio.


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Análisis de datos.




El estudio realizado y los resultados de evaluación obtenidos, permiten concluir que el curso es adecuado para que se imparta al resto de profesionales técnicos de Andalucía Emprende, ya que tanto sus resultados de aprendizaje, como el impacto obtenido en los profesionales demuestra una mejora real en el desempeño de su puesto de trabajo.

Como dificultad principal hemos encontrado el hecho de que todos los agentes implicados en el proceso de formación, cumplimentaran los cuestionarios correspondientes para poder realizar la explotación de la información.




1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Publicaciones científicas del equipo investigador y difusión de la investigación


Proyectos de Investigación relacionados:2009.- ¿Qué necesito aprender para ser teleformador?. Las competencias clave de la formación e-learning. http://www.portaleva.es/teleformadores/ (publicación digital). Con ISBN 978-84-613-7334-5.2010.- Coautor del artículo Hacia un itinerario de aprendizaje sólido para el teleformador: la propuesta del Programa EVA. Revista de Universidad y Sociedad del Conocimiento de la UOC (RUSC). Vol. 7. Número 1. ISSN 1698-580X. 2002 - 2004.- Investigador Principal, PAI Proyecto Andaluz de Investigación (exp. nº 52, publicado en BOJA num. 11 del 26 de enero de 2002) “Implantación de Nuevas metodologías aplicadas al desarrollo de Directivos en el Sistema Sanitario Público de Andalucía”).


Anexos documentales

Publicaciones:

Líneas de investigación futuras:

Análisis de las particularidades del sector objeto de estudio (Emprendedores), así como sus diferentes puestos de trabajo y las competencias que definen cada uno de los mismos, para así estudiar cuáles son las acciones formativas más adaptadas a las necesidades de dichos puesto.

http://www.portaleva.es/teleformadores/


1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15.

Colom, A., Sarramona, G. y Vázquez, G. (1994). Estrategias de formación en la empresa. Narcea. Madrid.Kirkpatrick, D. L. (1999). Evaluación de acciones formativas. Los cuatro niveles. Ed. Gestión. Barcelona.Levy-Leboyer, C. (1997). Gestión de las competencias. Gestión 2000.Stufflebeam y Shinkfield (1989). Evaluación Sistemática. Guía teórica y práctica. Paídos. Barcelona.

Bibliografía consultada.

Anexos documentales.

Guía del alumnado del Programa EVA.

Publicaciones científicas del equipo investigador y difusión de la investigación



Anexos documentales


Investigador: Francisco José García AguileraDepartamento: Métodos de Investigación e Innovación Educativa de la Facultad de Ciencias de la Educación..Tutor: Eduardo Elósegui Bandera.Programa de Doctorado: Investigación e Innovación Educativa.Bienio 2008-2010.

LOS PROCESOS FORMATIVOS EN LAS EMPRESAS: EVALUACIÓN DEL APRENDIZAJE Y SU IMPACTO EN EL

PUESTO DE TRABAJO

MUCHAS GRACIAS POR VUESTRA ATENCIÓN

Puedes ver esta presentación en aplicaciones de la web 2.0:

http://www.slideshare.net/Observacional/dea-enero-2011-19-enero-fjga

http://issuu.com/observacional/docs/dea_enero_2011_19_enero_fjga

http://www.slideshare.net/Observacional/dea-enero-2011-19-enero-fjga

http://issuu.com/observacional/docs/dea_enero_2011_19_enero_fjga

presentación tesina enero 2011

Education