D´ eroulement de l’exp´ erimentation

Dans cette exp´erimentation, nous avons proc´ed´e `a l’enregistrement de s´equences dans´ees expressives grˆace `a la combinaison Moven et l’´evaluation de ces s´equences par un groupes

d’´evaluateurs humains. Nous avons donc mis au point un protocole exp´erimental permettant de remplir ces deux objectifs. Cette exp´erimentation a ´et´e r´ealis´ee dans le cadre du projet CARE⁶, financ´e par l’Agence Nationale de la Recherche.

Cadre de l’exp´erimentation

Le sujet enregistr´e ´etait le danseur et chor´egraphe professionnel Ga¨el Domenger, affili´e au Ballet Biarritz, sp´ecialis´e dans l’improvisation. Les pr´econisations sur l’´evaluation d’un syst`eme de reconnaissance vues `a la partie 2.5 (page 46) ne s’appliquaient pas dans notre cas : en effet, notre but ´etait d’effectuer une reconnaissance sur des s´equences dans´ees et non sur des expressions spontan´ees de l’´emotion. Le mat´eriel utilis´e a ´et´e la combinaison Moven et le logiciel Moven studio. Une cam´era FireWire a ´egalement ´et´e utilis´ee afin de permettre une analyse vid´eo du mouvement par le laboratoire GIPSA⁷, produisant ainsi, pour chaque s´equence dans´ee, la s´equence vid´eo et la s´equence de coordonn´ees `a des fins de comparaison. Chaque enregistrement commen¸cait par un clap des mains afin de synchroniser coordonn´ees et vid´eo.

L’exp´erimentation s’est d´eroul´ee dans les locaux du Ballet Biarritz. La salle fournie pr´ e-sentait l’avantage d’une bonne luminosit´e et d’un fond uni, contrastant fortement avec la combinaison, assurant ainsi de bonnes conditions pour une analyse vid´eo.

Le groupe d’´evaluateurs ´etait limit´e `a sept personnes, dont cinq provenaient du monde la recherche (doctorant ou enseignants chercheurs). Une personne ´etait li´ee au domaine de la culture, et une autre ´etait ´etudiant en informatique. Etant donn´e le faible nombre d’´ evalua-teurs, nous n’avons pas pris en compte la distribution selon le sexe et l’ˆage.

Enregistrement des s´equences dans´ees

L’exp´erimentation a ´et´e d´ecoup´ee en quatre sessions d’enregistrement/´evaluation. La pre-mi`ere partie visait `a tester les six ´emotions d’Ekman o`u la surprise et la col`ere ´etaient divis´ees respectivement en surprise positive et n´egative et en col`ere chaude et froide. Les huit ´ emo-tions r´esultantes (joie, d´egoˆut, tristesse, peur, col`ere chaude, col`ere froide, surprise positive, surprise n´egative) ont ´et´e exprim´ees trois fois chacune. Le danseur avait donc pour rˆole de jouer 24 s´equences dans un ordre tir´e al´eatoirement. Les consignes sp´ecifiaient une position de d´epart droite, bras le long du corps. Un clap devait suivre ; puis le danseur improvisait une s´equence d’une minute environ en faisant monter progressivement l’intensit´e de l’´emotion exprim´ee. Dans cette partie, le danseur ´etait directement inform´e de l’´emotion `a jouer par le label correspondant (“la joie”, “la col`ere”,. . . etc.). Dans cette session, une pause de quelques minutes a ´et´e introduite apr`es la quatorzi`eme s´equence. Un probl`eme technique a entraˆın´e une deuxi`eme pause `a la vingti`eme s´equence.

La deuxi`eme partie pr´esentait un protocole similaire ; le danseur ne devait ici pas expri-mer des ´emotions mais les temp´eraments extrˆemes situ´es aux extr´emit´es du cube PAD [95]

6

Cultural experience : Augmented Reality and Emotion, http ://www.careproject.fr/

7

6.5. Exp´erimentation 149

(voir partie 1.3.2, page 24). Le danseur devait donc tour `a tour exprimer un temp´erament exub´erant, ennuy´e, d´ependant, d´edaigneux, relˆach´e, anxieux, docile et hostile. La troisi`eme session ´etendait le protocole aux relations interpersonnelles : ami avec quelqu’un, ennemi avec quelqu’un, dominant et soumis. Enfin, la derni`ere session avait pour but de tester l’expression de m´elange d’´emotions. Pour cette session, nous avons ´ecart´e les variations de col`ere et de surprise pour ne tester que les ´emotions primaires d’Ekman : la joie, la col`ere, la surprise, la tristesse, la peur et le d´egoˆut. Contrairement aux autres sessions, l’approche utilis´ee ici a ´et´e une approche sc´enario. Au lieu de signifier au danseur l’´emotion `a exprimer, un sc´enario court lui ´etait dit, devant lui permettre de mieux appr´ehender l’improvisation. Sept m´elanges ont ´et´e ainsi enregistr´es par les sc´enarii suivants :

– Peur + col`ere : “Quelqu’un te menace et tu as `a la fois peur d’une attaque et en col`ere `

a cause de la provocation.”

– Tristesse + peur : “Tu as perdu ta maison dans un d´esastre et apprends qu’il y a toujours du danger.”

– D´egoˆut + surprise : “Tu es d´egoˆut´e par quelque chose d’inattendu.” – Tristesse +col`ere : “Un automobiliste a ´ecras´e ton chien.”

– Joie + tristesse : “Tu te sens nostalgique d’une exp´erience douce-am`ere.”

– D´egoˆut + col`ere : “Tu dis `a quelqu’un : “Comment oses-tu me montrer quelque chose d’aussi d´egoˆutant ?””

– Joie + col`ere : “Ton enfant a fait une amusante bˆetise et tu veux montrer ta col`ere alors que tu as envie de rire.”

Evaluation des s´equences dans´ees

Les ´evaluations de chaque s´equence expressive ont ´et´e faites sur le principe du choix forc´e. Les observateurs se sont vu remettre, avant chaque session, un feuillet comportant un tableau constitu´e du num´ero de la s´equence vue sur les lignes et des ´etats affectifs `a choisir en co-lonnes. Les observateurs avaient pour consigne d’identifier de une `a trois ´emotions dans une s´equence. Dans aucune session les observateurs n’´etaient pr´evenus si l’expression dans´ee se faisait sur des ´etats affectifs uniques ou sur des m´elanges. Les observateurs pouvaient donc observer une ´emotion unique, un m´elange d’´emotions ou une succession d’expressions dans la mˆeme s´equence. Pour annoter cela, il a ´et´e demand´e aux observateurs de noter d’un “1” la premi`ere ´emotion reconnue, “2” la deuxi`eme, et “3” la troisi`eme. Des ´emotions m´elang´ees ´etaient annot´ees d’un mˆeme num´ero.

L’exp´erimentation d´ecrite dans cette partie nous a permis de rassembler des ´evaluations humaines, en direct, aux, mˆemes s´equences dans´ees que pour le test d’eMotion, afin de servir de point de r´ef´erence. Nous avons de plus constitu´e un corpus de s´equences dans´ees expressives de divers ´etat affectifs en utilisant deux mesures : l’enregistrement de coordonn´ees du corps par la Moven et des s´equences vid´eo de chaque s´equence dans´ees. La pr´esence d’un clap en d´ebut et en fin de s´equence permet de synchroniser, pour une mˆeme s´equence, enregistrement vid´eo et coordonn´ees. Ce corpus ouvre certaines perspectives et peut trouver diverses utilit´es, mˆeme hors du domaine de la reconnaissance d’´emotions ; par exemple, pour un syst`eme de suivi 3D du corps humain, les enregistrements de coordonn´ees pourraient permettre de quantifier facilement la pr´ecision du suivi bas´e vid´eo.

Emotion ^{Pourcentage de} reconnaissance joie 71,43% d´egoˆut 47,62% tristesse 61,90% peur 28,57%

col`ere chaude 85,71% col`ere froide 85,71% surprise positive 19,05% surprise n´egative 9,52%

Tab. 5: Pourcentages de reconnaissance des s´equences dans´ees expressives par les observateurs humains.