Selection of key standards to create an instrument information literacy

assessment in Compulsory Secondary Education

Marcos Bielba Calvo

Fernando Martínez Abad

Mª Esperanza Herrera García

INTRODUCTION

Information Literacy

Information overload

Knowledge Society

INTRODUCTION

www.smarteducation.com.co/ http://www.mindmapart.com – IQMatrix.com

Problem

Solution

INTRODUCTION

• Dimension of Information Need

• Dimension of Information Search

• Dimension of Information Assessment

• Dimension of Information Process

• Dimension of Information Communication

The abilities to search, obtain, process and communicate information and transform it

in knowledge. It has different abilities, from the access to the information to its

transmission in different media, including the use of Information and Communication

Technologies as main element to inform, learn and communicate. (Information literacy

Treatment and Digital Competence. Ministry of Education, Culture and Sports, 2013. Guide to the

training in educational centres about basic competences).

INTRODUCTION

http://noticias.iberestudios.com/escuela-2-0-tecnologias-tic-en-las-aulas/

1. Designing a table of specifications with the dimensions, sub-dimensions and

performance standards of information literacy from the review, unification and

selection of standards from different handbooks.

2. Doing an initial selection of the standards from the comparison between the table

of specifications and the Spanish Curriculum contents.

3. Selecting the key standards from the relative importance that they have in the

Curriculum, its importance during the start-up process and the importance

assigned by experts on assessment.

AIMS

• Design: It is used a design of type non-experimental from studies of type

descriptive-correlational with a methodology ex-post-facto.

• Sample: For the development of the 3rd phase, 14 experts in information literacy who

belong to different branches of knowledge (social, sciences, computing, IT,

documentation…) constitute the simple.

METHOD

www.smcdsb.on.ca

• Variables and instruments: The instruments used to collect the data is a

questionnaire carried out with Google Drive (Google Forms). They contain 42

initial standards, selected from the review of handbook and adapted to the level of

Secondary Education in Spain. It is a Likert-type (1 to 10).

METHOD

• Phase 1: Review of the different handbooks about informationliteracy.

METHOD: Phases

• Phase 2: Comparison between the table of specifications and the Spanish

Curriculum in Secondary Education. It collects the criteria of Organic Law of

Education (2006).

• Its obtained a first score about the importance of each standards depending on

the specific weighting that which of them has in the Curriculum.

METHOD: Phases

• Phase 3: Creation a flowchart in order to represent the main nodes and theirrelation.

• Through this process it is obtained a second score about the importance of eachlearning result (1 point if the node sent a link and 2 points if the node received alink).

METHOD

• Phase 4: Once finished the whole process, the last phase is to do a valuation of the

standards by experts on that topic.

• Through this way, the experts value from 1 to 10 the importance of each of

standards (42), which are related to the information literacy in Secondary

Education.

METHOD

mighelp.viczian.hu

• Phase 5: It performs the calculation of percentiles by standardized scored,

becoming in Z score and doing the weighted summation of these.

• 25% refers to the connections established between the different learning results of the

flowchart.

• 25% refers to the comparison of the specification table and the Curriculum in secondary

education.

• 50% is extracted from the valuation made by experts.

METHOD

• In all phases, descriptive techniques such as the analysis of frequency tables and

calculating the average, deviation and coefficient of variation, are used. The

selection of final standards is proceeded from the calculation of percentiles from

the weighted score of the three variables.

DATA ANALYSIS

datosprimarios.blogspot.com

• First Phase

• Second Phase• In general the dimension of

information search predominates

RESULTS

4 Dimension

s

14 Learning Results

42Standards

RESULTS

DIMENSIÓN DE BÚSQUEDA DE INFORMACIÓN / DIMENSION OF INFORMATION SEARCH

O5, Conoce los tipos de fuentes de información apropiados, sean impresos o no.

B1O5, T6, T3, T2 Selecciona las fuentes de información que “mejor se ajusten” a la tarea a realizar.

O5, T2 Habilidad para comprender los problemas que afectan a la accesibilidad de las fuentes.

O5, T6, T2 Es capaz de diferenciar entre fuente primaria y secundaria.

O1, O5, Identifica la disciplina donde se enmarca el problema informacional.

B2

O1, O2, Identifica palabras clave, sinónimos y términos relacionados para la información que necesita.

O1, O2, O3, O4,

O5, O7, T2

Construye una estrategia de búsqueda utilizando los comandos apropiados del sistema de recuperación de información elegido (por ejemplo: operadores

booleanos, truncamiento y proximidad para los motores de búsqueda; organizadores internos, como los índices para libros).

O2, O3, O5, O7,

T6, T3, T2

Aplica la estrategia de búsqueda en varios sistemas de recuperación de información utilizando diferentes interfaces de usuario y motores de búsqueda,

con diferentes lenguajes de comando, protocolos y parámetros de búsqueda.

O1, O2, O3, O4,

O5, O7, T6, T3, T2Utiliza diversos sistemas de búsqueda para recuperar la información en formatos diferentes.

B3O1, O2, O3, O4,

O5, O7, T6, T3, T2

Utiliza personalmente o en línea los servicios especializados disponibles en la institución para recuperar la información necesaria (por ejemplo: préstamo

interbibliotecario y acceso al documento, asociaciones profesionales, oficinas institucionales de investigación, recursos comunitarios, expertos y

profesionales en ejercicio).

O1, O2, O3, O5,

O7, T6, T3

Selecciona la técnica más adecuada para la tarea de extraer la información que necesita (por ejemplo: funciones de copiar y pegar en un programa de

ordenador, fotocopiadora, escáner, equipo audiovisual o instrumentos exploratorios).

B4O1, O2, O3, O4,

O5, T3Crea un sistema para organizarse y gestionar la información (por ejemplo: fichas, Ednote…).

O2, O4, Registra la fuente primaria de la que se ha extraído la información para referencias futuras.

RESULTS

DIMENSIÓN DE EVALUACIÓN DE LA INFORMACIÓN / DIMENSION OF INFORMATION ASSESSMENT

O5, O7, T6,

T3, T2

Valora la cantidad, calidad y relevancia de los resultados de la búsqueda para poder determinar si habría que utilizar

herramientas de acceso a la información o métodos de investigación alternativos.

E1T2 Identifica lagunas en la información recuperada y es capaz de determinar si habría que revisar la estrategia de búsqueda.

T2 Es capaz de determinar si la información satisface la investigación u otra necesidad de información.

O1, O2, O3,

O4, O5, T6, T2

Examina y compara la información de varias fuentes para evaluar su fiabilidad, validez, corrección, autoridad,

oportunidad y punto de vista o sesgo.

E2

O1, O2, O3,

O4, O5, T6, T2

Identifica la finalidad y los destinatarios de los recursos potenciales (por ejemplo: divulgativo vs erudito, actualizado vs

histórico).

O1, O2, O3,

O4, O5, T6, T2Reconoce y pone en cuestión los prejuicios, el engaño o la manipulación.

O1, O2, O3,

O4, O5, T6Tiene en cuenta la estructura del texto.

DIMENSIÓN DE PROCESAMIENTO DE LA INFORMACIÓN / DIMENSION OF INFORMATION PROCESS

O7, T1, T2, T3,

T5, T7, T8,

Crea un sistema de organización y gestión de la información obtenida (por ejemplo: mediante fichas, programas, automatizado de

gestión de referencias, esquemas, borradores, diagramas…).P1

O2, O3, O4, O5,

O7, T8,T2 Maneja distintos modos de acceso a la información (por ejemplo: textos digitales, imágenes, datos..)

O4, T1, T7, T8,

T2

Reconoce la interrelación entre conceptos y los combina en nuevos enunciados primarios potencialmente útiles con el apoyo de las

evidencias correspondientes.

P2T1, T5, T7, T8,

T2

Extiende la síntesis inicial hacia un nivel mayor de abstracción para construir nuevas hipótesis que pueden requerir información

adicional.

O7, T1, T5, T2 Analiza y sintetiza la información de la que dispone utilizando diversas técnicas (mapas conceptuales, esquemas…)

O2, O4, T1, T6,

T8, T7, T2Comprueba si la nueva información contradice o verifica los conocimientos previos.

P3Comprende que la información y el saber en cualquier disciplina es en parte un constructo social que está sometido a cambios

como resultado de un proceso continuo de diálogo e investigación.

T8, T5, T7, T3 Integra la nueva información con la información o el conocimiento previo).

O3, O5, O7, T5,

T2Utiliza encuestas, cartas, entrevistas y otras formas de investigación para obtener información primaria.

P4

O2, T1, T8, T5 Combina los conocimientos previos con los conocimientos adquiridos.

RESULTS

DIMENSIÓN DE COMUNICACIÓN DE LA INFORMACIÓN / DIMENSION OF INFORMATION COMMUNICATION

CO4, CO5 Respeta la libertad de expresión y privacidad individual.

C1CO4, CO5Comprende de la propiedad intelectual, los derechos de reproducción y el uso leal de los materiales acogidos a la

legislación sobre derechos de autor o copyright.

Reconoce en la desigualdad en el acceso a la información un factor que contribuye a las diferencias socioeconómicas.

CO4, CO5, T4, T2 Emplea una identidad digital propia.

C2CO4, CO5, Respeta los derechos de uso y acceso a la información.

CO4, CO5 Cita correctamente los recursos de información utilizados.

CO3, CO4, T3 Selecciona un estilo de presentación documental adecuado.

C3CO3, CO4, CO5, T4,

T3

Elige el medio de comunicación que mejor apoye la finalidad del producto o la actividad y los destinatarios a los que

se dirige.

CO3, CO4, Incorpora principios de diseño y comunicación.

C4

CO1, CO2, CO3,

CO4, CO5, T4, Comunica con claridad y un estilo adecuado a los fines de la audiencia.

CO1, CO2, CO3,

CO4, CO5, T4Comunica de manera objetiva y respeta los valores universalmente aceptados.

RESULTS

RESULTS

DIAGRAMA DE FLUJO / FLOWCHART RECIBE

RECEIVES

ENVÍA

SENDS

B1 Conoce y domina las fuentes de información para acceder a la información que se necesita 4 2

B2 Planifica la búsqueda 5 2

B3 Selecciona información 1 3

B4 Extrae, registra y gestiona la información y sus fuentes 2 2

E1 Aplica y evalúa 1 4

E2 Conoce Criterios de evaluación 3 2

P1Revisa el proceso de actuación, gestionando la información reunida o generada y organiza lainformación

3 2

P2 Sintetiza las ideas principales para construir nuevos conceptos 3 4

P3Compara el nuevo conocimiento previo para determinar el valor añadido, las contradicciones u otrascaracterísticas propias de la información.

1 3

P4 Crea conocimiento nuevo. 2 3

C1Comprende y aplica las cuestiones éticas, legales y sociales que envuelven la información y lastecnologías de la información

3 4

C2Sigue las leyes, reglamentos y políticas institucionales así como las normas de cortesía relacionadascon el acceso y uso de los recursos de información

2 2

C3 Conoce y domina herramientas 3 3

C4 Es capaz de comunicar a los demás con eficacia el producto o actuación 3 0

RESULTS

RESULTS

DIMENSION LEARNING RESULTS ni/n TOTAL

BÚSQUEDA

---------------------

SEARCH

B1: manage resources 2/4

5/12B2: know how to do the search planning 3/4

B3: select information 0/2

B4: extract and manage the sources 0/2

EVALUACIÓN

---------------------

ASSESSMENT

E1: apply and assess 1/3

3/7E2: know assessment criteria 2/4

PROCEDIMIENTO

---------------------

PROCESS

P1: review the process 2/2

8/10P2: synthesize ideas and create new concepts 3/3

P3: compare new knowledge 2/3

P4: create new knowledge 1/2

COMUNICACIÓN

---------------------

COMMUNICATION

C1: understand and apply ethical standards 0/3

3/11C2: know the rules, laws and policies 1/3

C3: know and manage tools 1/2

C4: know how to communicate effectively 1/3

DIMENSION LEARNING RESULTS Xres Xdim

BÚSQUEDA

---------------------

SEARCH

B1: manage resources 0,23

-0,09B2: know how to do the search planning 0,46

B3: select information -0,66

B4: extract and manage the sources -0,40

EVALUACIÓN

---------------------

ASSESSMENT

E1: apply and assess -0,10-0,01

E2: know assessment criteria 0,09

PROCEDIMIENTO

---------------------

PROCESS

P1: review the process 0,50

0,20

P2: synthesize ideas and create new concepts

0,73

P3: compare new knowledge -0,08

P4: create new knowledge -0,35

COMUNICACIÓN

---------------------

COMMUNICATION

C1: understand and apply ethical standards

-0,45

-0,19C2: know the rules, laws and policies -0,15

C3: know and manage tools -0,03

C4: know how to communicate effectively

-0,14

RESULTS

- The dimension of information process is the most important,

with an average of 0,20

1. Each handbook uses its own criteria; therefore, there are somedifferences between them: different dimensions, handbooks based oncognitive skills, handbooks based on practice…

2. In the phase 2 and 3 the information search dimension is the mostvaluable. However, in the phase 4, the data obtained by experts onvaluations, the information process dimension is the most valuable.

3. Despite of these differences, it is important to say that all dimensions areimportant because all of them are related to each other.

CONCLUSIONS

Marcos Bielba CalvoFernando Martínez Abad

Mª Esperanza Herrera García

Thank you so much