du signe au multimédia patrick benazet université de caen 27 avril 2004 patrick benazet...

Du signe au Du signe au multimédiamultimédia

Patrick BENAZETPatrick BENAZETUniversité de CAENUniversité de CAEN

27 AVRIL 200427 AVRIL 2004

Patrick BENAZETPatrick BENAZETUniversité de CAENUniversité de CAEN

27 AVRIL 200427 AVRIL 2004

22

1- Notions de sémiotique et de phanéroscopie1- Notions de sémiotique et de phanéroscopie2 - Architectonique du signe2 - Architectonique du signe3 - Analyse des processus interprétatif3 - Analyse des processus interprétatif4 - Du signe à la conception multimédia 4 - Du signe à la conception multimédia

PlanPlan

33

1- Notions de sémiotique1- Notions de sémiotiqueet de phanéroscopieet de phanéroscopie

44

CommentCommentpasser du signe passer du signe au multimédia?au multimédia?

55

La sémiotique triadiqueLa sémiotique triadique

66

Notion de triadicitéNotion de triadicitéA

C B

77

Merise : rappelMerise : rappel

MCD MCT

MLD MLT

MPD MPT

88

fournisseur

client

facturer

1,n

1,n

Concept de facturation Concept de facturation avec Meriseavec Merise

99

La triade facturationLa triade facturation

client

fournisseur facture

1010

La triade : union de deux La triade : union de deux instances par une troisièmeinstances par une troisième

client

fournisseur facture

1111

Le signe : un médiateurLe signe : un médiateur

1212

Les catégories Les catégories phanéroscopiquesphanéroscopiques

Tiercéitélois, conceptset habitudes

Secondéitéfaits et

existants

Priméitéqualités desentiments

1313

Présupposition des catégoriesPrésupposition des catégorieset phanéronet phanéron

primans

secondans

tertians

1414

Présupposition des catégoriesPrésupposition des catégories

qualités

existant

loiarticle du code de la route

panneau de signalisation

circularité, rougéité, blanchéité etc.

présuppose

présuppose

1515

2 - Notions et architectonique 2 - Notions et architectonique du signedu signe

1616

Signe iconiqueSigne iconique

1717

Signe indexicalSigne indexical

1818

Signe symboliqueSigne symbolique

1919

Le signe triadiqueLe signe triadique

Signe(ce qui représente)

Objet(ce qui est acheminé jusqu’à

l’esprit de l’interprète)

Interprétant(ce qui permet l’interprétation)

1ère

dét

erm

inat

ion 2èm

e détermination

2020

Les combinatoires au sein du Les combinatoires au sein du signe triadiquesigne triadique

Signe(ce qui représente)

icône / indice / symbole

Objet(ce qui est acheminé jusqu’à

l’esprit de l’interprète)qualisigne / sinsigne / légisigne

Interprétant(ce qui permet l’interprétation)

rhème / dicent / argument

2121

9 divisions du signe9 divisions du signe

Légisigne Symbole Argument

Sinsigne Indice Dicent

Qualisigne icône Rhème

objet signe interprétant

2222

10 combinaisons triadiques10 combinaisons triadiques

Légisigne Symbole Argument

Sinsigne Indice Dicent

Qualisigne icône Rhème

objet signe interprétant

2323

Les classes de signes triadiquesLes classes de signes triadiques

333 Argument332 Symbole Dicent331 Symbole Rhématique322 Légisigne Indexical Dicent321 Légisigne Indexical Rhématique311 Légisigne Iconique222 Sinsigne Indexical Dicent221 Sinsigne Indexical Rhématique211 Sinsigne Iconique111 Qualisigne

2424

Le signe triadique : un processusLe signe triadique : un processus

Objet du signe : Obligation de s’arrêter

Intériorisation du légisigne(connaissance

antérieurement acquise)

2525

3 - Analyse du processus 3 - Analyse du processus interprétatif avec le treillis des interprétatif avec le treillis des

classes de signesclasses de signes

2626

Le treillis des classes de signesLe treillis des classes de signes

2727

Le treillis des classes de signes :Le treillis des classes de signes :

un outil un outil d’analyse sémio-cognitived’analyse sémio-cognitive

2828

L’analyse sémio-cognitiveL’analyse sémio-cognitive

Exemple de la goutte d’eau

2929

Notion de chemin cognitifNotion de chemin cognitif

3030

Phanéroscopie Phanéroscopie de la goutte d ’eaude la goutte d ’eau

Hyperlien Tertians

(lois, concepts, habitudes)

Le cycle de l'eau

Un pointeur de souris qui se

transforme en main pointant un

doigt

Secondans (faits, existants)

Une goutte d'eau qui tombe du ciel

dans la mer

orientation Primans

(qualités de sentiments)

Aquifère, bleuéité, renouvelabilité

3131

Treillis des classes de signes Treillis des classes de signes de la goutte d’eaude la goutte d’eau

333 si je clique sur la goutte d’eau, j’atteindrai laleçon “cycle de l’eau”332 hyperlien donnant accès à la leçon “cycle de l’eau”331 accès à la leçon “cycle de l’eau”322 image sensitive d’une goutte d’eau321 hyperlien sur l’image goutte d’eau311 le cycle de l’eau222 info-bulle et message sonore221 pointeur de souris en forme de doigt pointé211 image d’une goutte d’eau tombant du ciel dans la mer111 aquifère, bleuéité, renouvelabilité

3232

Les 3 zones du Treillis Les 3 zones du Treillis

représentationiconique

inférence

Significationaboutie

3333

Les 5 inférences possibles Les 5 inférences possibles

3434

Les 5 chemins cognitifsLes 5 chemins cognitifs

E HEA H

DDIIA

hypothético-déductifempirico déductifhypothético-inductifempirico inductifabductif

3535

4- Du signe à la conception 4- Du signe à la conception multimédiamultimédia

3636

UML : rappelUML : rappel(Unified Modeling Language)(Unified Modeling Language)

•Un langage de modélisation standardisé permettant de concevoir des dispositifs informatiques dans l’environnement orienté objet.

•Une formalisation basée sur des diagrammes avec notamment :

• diagramme d’objet ou de classe d’objets• diagramme de cas d’utilisation• diagramme de collaboration

3737

Environnement multimédia :Environnement multimédia :2 principes fondamentaux2 principes fondamentaux

•Interactivité•notion de volition

•Multimodalité•coopération d’instances unimédias

3838

La volition selon PeirceLa volition selon PeirceUne réaction au signe, pas toujours voulue :

volition active vs volition passive

feeling

cognition volition

3939

Coopération multimodale :Coopération multimodale :6 configurations triadiques6 configurations triadiques

Sonore(s)

Visuel(V)

Volitif(v)

V(v S)

V (S v)

S (v V)

S (V v)

v (S V)

v (S V)

4040

Exemple du MemoryExemple du Memory

Émission d’un cri d’animal

(s)

Affichage de photos d’animaux

(V)

Clic sur la bonne image

(v)

V(S v)

• une série d’images s’affiche

• un cri d’animal est produit

• l’interprète doit cliquer sur l’image correspondant au cri

Le visuel détermine la volition par l’intermédiaire du sonore

Coopération multimodale en complémentarité

4141

Coopération multimodale :Coopération multimodale :

3 modes de coopération• Complémentarité du son et de l’image• Redondance entre son et image • Concurrence du son sur l’image et vise versa

Impacts sur l’activité cognitive

du renforcement cognitif...... à l’echec cognitif

4242

Le treillis des classes de signes syncrétiqueLe treillis des classes de signes syncrétique

4343

Retour sur UML : Retour sur UML :

quel est l’apport de la quel est l’apport de la sémiotique triadique?sémiotique triadique?

4444

Hyperlien Tertians

(lois, concepts, habitudes)

Le cycle de l'eau

Un pointeur de souris qui se transforme en

main pointant un doigt

Secondans (faits, existants)

Une goutte d'eau qui tombe du ciel

dans la mer

orientaion Primans

(qualités de sentiments)

Aquifère, bleuéité,

renouvelabilité

De la phanéroscopie au diagramme De la phanéroscopie au diagramme d’objet ou de classe d ’objetsd’objet ou de classe d ’objets

UMLSémiotique

Hyperlien Nom

Afficher_Pointeur_Souris()Afficher_Image()Jouer_Son()

Méthodes

Apparence :Sonorité :Sentiment :

Attributs

4545

Des chemins cognitifs au Des chemins cognitifs au diagramme de cas d’utilisationdiagramme de cas d’utilisation

UMLSémiotique

4646

Du treillis syncrétique au Du treillis syncrétique au diagramme de collaborationdiagramme de collaboration

UMLSémiotique

4747

Un cadre méthodologique proposé : Un cadre méthodologique proposé : SémioDevSémioDev

Une méthodologie en 5 étapes :

• Prise en compte des objectifs d’apprentissage

• Dessin des parcours cognitifs à intégrer

• Définition des structures sémiotiques

• Elaboration de la charte des concepts de représentation

• Architecture des situations d’interactivité, éléments de scénario

4848

FinFin