LES INTERFACES ÉMOTIONNELLES

Réalisé par: Sabrine MASTOURA

Présenté le: 14/12/2016

Mastère de Recherche TIC: Multimédia 2016-2017

Université de CarthageEcole Nationale d’ingénieurs de Carthage

PLAN

Introduction

Les interfaces émotionnelles

Modélisation des interfaces émotionnelles

Transfert des expressions faciales émotionnelles

Conclusion

INTRODUCTION Les émotions représentent pour les chercheurs

un champs d’étude promoteur pour modéliser des interfaces.

1

LES INTERFACES ÉMOTIONNELLES Inspiration du Pyramide des besoin de Maslow

Interaction plus naturelle

Création de sentiment de confiance et d’engagement

Déclenchement des émotions positives2

LES INTERFACES ÉMOTIONNELLES Convivialité du logo de Google

Changement des logos de Google Inspiration de la vie quotidienne Inspiration des données personnelles

3

MODÉLISATION DES INTERFACES ÉMOTIONNELLES

Des Images en grand:

Des images occupant tout l’espace

Des images utiles:

Des images significatives

4

MODÉLISATION DES INTERFACES ÉMOTIONNELLES

Agent de Poste Un visage poupon Un sourire engageant Une démarche en avant

5

MODÉLISATION DES INTERFACES ÉMOTIONNELLES

L’émotion par petite touche: Impacter la mémoire à court terme par des

surprises

Des messages drôles Des messages de divertissements

6

MODÉLISATION DES INTERFACES ÉMOTIONNELLES La ligne éditoriale

Accompagner l’image par une courte phrase

Insister sur l’idée Ajouter de l’humour

7

TRANSFERT DES EXPRESSIONS FACIALES ÉMOTIONNELLES

But:

Evaluer la performance des machines de Boltzman restreintes dans le transfert des expressions faciales émotionnelles

8

TRANSFERT DES EXPRESSIONS FACIALES ÉMOTIONNELLES Collecte des données:

Détecter la parole et le visage:

Un visage comportant 103 détails 7 émotions différentes du même visage Des captures en 2D (x et y) Des captures avec une fréquence de 100

images/sec Chaque émotion est capturée 532 fois Sélection de 200 capture pour chaque émotion

Le jeu de donnée 206 attributs

200 exemples 9

TRANSFERT DES EXPRESSIONS FACIALES ÉMOTIONNELLES Préparation des données:

Normalisation des données

Choix de la référence: Neutre avec bouche fermée

Alignement de l’audio avec les phonèmes

Mise en correspondance des phonèmes et des captures

Former des couples d’émotions tq (neutre, heureux)

Utilisation de l’ACP

Jeu de donnée = Base d’apprentissage (150) + Base de test(50)10

TRANSFERT DES EXPRESSIONS FACIALES ÉMOTIONNELLES Modélisation:

Concentration sur la variation neutre heureux

Utilisation de la machine de Boltzmann temporelle TRBM Capter les dépendances temporelles Générer des séquences d’émotions de sortie

Utilisation de la machine entrée sortie de Boltzmann temporelle IOTRBM Transformer une expression neutre en une expression émotionnelle Utilisation de , 10, 50 et 100 unités par couche Comparaison des résultats avec

Régression Linéaire LR Modèle Autorégressive AR Perceptron Multi Couches MLP

3

11

TRANSFERT DES EXPRESSIONS FACIALES ÉMOTIONNELLES Evaluation:

Utilisation de la moyenne des erreurs quadratiques MSE

IOTRBM est capable de détecter les variations des expressions faciales du neutre à l’heureux

12

CONCLUSION

Amélioration de l’interaction utilisateur-interface

Vérifier la machine sur le reste des émotions

Vérifier la machine sur des captures 3D

13

Merci pour votre attention

14