Le but de cette thèse était d’étudier le développement de la catégorisation des expressions faciales émotionnelles chez les enfants francophones à l’aide de deux tâches de jugement: l’étiquetage verbal (étude 1) et le jugement à choix forcés (étude 2). Le modèle théorique ayant guidé les études était celui proposé par Widen et Russell (2003, 2010). Les résultats de la première étude ont montré une très forte correspondance entre la séquence d’utilisation des catégories émotionnelles et celle prédite par le modèle de Widen et Russell. De plus, les résultats ont généralement appuyé les prédictions du modèle en ce qui concerne les profils de développement se rapportant à l’exactitude des jugements et à la fréquence d’utilisation et l’extension des catégories émotionnelles. Enfin, la première étude a permis de recueillir des informations sur le lexique émotionnel des enfants francophones, ce qu’aucune étude antérieure n’avait fait à notre connaissance. La deuxième étude visait à vérifier si le modèle de Widen et Russell décrivait bien l’utilisation des catégories émotionnelles dans la tâche de jugement à choix forcés. Les résultats ont montré que la performance des participants était supérieure au hasard dès 3 ans et, que conformément aux prédictions, elle augmentait pour chacune des six expressions entre 3 et 8 ans. Comme le prévoyait le modèle, le nombre de catégories émotionnelles utilisées par les enfants a augmenté en fonction de l’âge. L’utilisation des catégories de joie, tristesse et colère a diminué en fonction de l’âge alors que l’utilisation des catégories de peur, surprise et tristesse a augmenté. Cependant, les prédictions du modèle en rapport avec l’extension des catégories émotionnelles n’ont été que partiellement appuyées, puisque l’extension des catégories avait tendance à diminuer entre 3 et 8 ans seulement dans le cas de la joie et de la colère. Enfin, les résultats de la deuxième étude n’ont pas appuyé la séquence d’utilisation des catégories émotionnelles prédite par le modèle.

Bien que de nombreuses études aient examiné le décodage des expressions faciales émotionnelles, un débat subsiste toujours concernant la nature de l’information véhiculée par le visage. Parmi les approches théoriques qui se démarquent actuellement, figure le modèle des processus composants (MPC) élaboré par Scherer (1984, 1992, 2001). Ce chercheur soutient que les expressions faciales transmettent de l’information allant au-delà d’une simple catégorie émotionnelle et que les décodeurs seraient en mesure d’interpréter celles-ci en termes d’évaluations cognitives. D’après ce qui a été observé dans l’étude de Scherer et Grandjean (2008), les inférences basées sur les évaluations cognitives mèneraient à une reconnaissance se comparant en exactitude à celle obtenue avec les catégories émotionnelles. Néanmoins, il existe encore peu de données empiriques offrant un appui à ces conclusions. Cette thèse a donc comme objectif d’examiner les propositions théoriques de Scherer relativement au décodage du comportement expressif facial. Pour ce faire, nous proposons une série de trois études menées à l’aide d’une tâche de jugement et utilisant des photographies d’expressions faciales. Dans la première étude, nous avons répliqué une partie de celle de Scherer et Grandjean en y apportant certaines améliorations méthodologiques. Les pourcentages d’exactitude élevés obtenus valident ceux de l’étude originale et confirment la capacité des décodeurs à inférer les évaluations cognitives à partir du visage. Certaines divergences, en ce qui a trait à la justesse du jugement en fonction du type d’émotion, ont toutefois été observées. Lors de la seconde étude, nous avons repris la même tâche en créant deux conditions distinctes permettant d’évaluer l’impact du niveau d’abstraction des évaluations proposées sur la performance. Les résultats indiquent que les participants sont en mesure d’inférer l’évaluation cognitive avec un taux de réussite élevé, et ce, peu importe le niveau d’abstraction, offrant ainsi un appui additionnel au MPC. En outre, cette étude nous a également permis d’observer des patrons de reconnaissance similaires à ceux de l’étude 1 relativement aux types d’émotions présentées. Dans le cadre de la troisième et dernière étude, nous avons poussé plus loin la validation des prédictions du MPC en examinant spécifiquement si le décodeur est en mesure de reconnaitre les évaluations cognitives communiquées par diverses unités d’action faciales individuelles, et si certaines d’entre elles semblent posséder une valeur signalétique plus puissante ou distincte. Une tâche de jugement dans laquelle les participants ont évalué, sur une échelle d’intensité, l’adéquation entre l’unité d’action observée dans l’image et les cinq énoncés représentant les critères d’évaluation majeurs du MPC, a finalement été utilisée pour tester cet objectif. Nous avons ainsi pu constater l’aptitude du décodeur à identifier de l’information relevant de la composante cognitive sur la base de certains mouvements faciaux pris isolément, attestant de la valeur signalétique intrinsèque des unités d’action dans le processus d’interprétation des visages telle que postulée au sein du modèle de Scherer.

Thèse numérisée par la Direction des bibliothèques de l'Université de Montréal.

La thèse traite de l'analyse et la classification des états émotionnels perçus dans la parole lors de conversations naturelles. La majorité des expériences ont été effectuées sur des données enregistrées dans un centre d'appel médical contenant 20h de conversation homme-homme. La première partie du travail a consisté à proposer un protocole d'annotation adapté à la complexité des données réelles avec en particulier la possibilité d'annoter deux états émotionnels par segment. Des réflexions ont été conduites sur la manière de valider ces annotations et un vecteur " émotion " a été déduit de chaque annotation. Ces vecteurs ont révélé la présence d'états émotionnels mélangés qui ont été analysés et validés par des tests perceptifs. La deuxième partie porte sur la mise en oeuvre d'algorithmes de classification pour détecter des états émotionnels après l'extraction de plus d'une centaine d'indices paralinguistiques par segment. Les segments non complexes du corpus ont été utilisés pour entraîner des classifieurs, principalement des Support Vector Machine (SVM), afin de discriminer 2 à 5 classes " Emotion ". Les performances ont également été comparées selon le type d'indices extraits et en prenant en considération le sexe ou le rôle (agent/client) du locuteur. Une collaboration a été effectuée avec d'autres sites du réseau d'excellence HUMAINE afin de comparer les indices et méthodes sur des données en allemand. Les performances du LIMSI étaient au niveau de l'état de l'art. Enfin, une comparaison entre les états émotionnels présents dans des données actées et naturelles a montré que les modèles entraînés sur un type de données ne fonctionnaient pas forcément sur l'autre.

Notre travail s'inscrit dans le domaine de l'affective computing et plus précisément la modélisation, détection et annotation des émotions. L'objectif est d'étudier, d'identifier et de modéliser les émotions afin d'assurer l'échange entre applications multimodales. Notre contribution s'axe donc sur trois points. En premier lieu, nous présentons une nouvelle vision de la modélisation des états émotionnels basée sur un modèle générique pour la représentation et l'échange des émotions entre applications multimodales. Il s'agit d'un modèle de représentation hiérarchique composé de trois couches distinctes : la couche psychologique, la couche de calcul formel et la couche langage. Ce modèle permet la représentation d'une infinité d'émotions et la modélisation aussi bien des émotions de base comme la colère, la tristesse et la peur que les émotions complexes comme les émotions simulées et masquées. Le second point de notre contribution est axé sur une approche monomodale de reconnaissance des émotions fondée sur l'analyse des signaux physiologiques. L'algorithme de reconnaissance des émotions s'appuie à la fois sur l'application des techniques de traitement du signal, sur une classification par plus proche voisins et également sur notre modèle multidimensionnel de représentation des émotions. Notre troisième contribution porte sur une approche multimodale de reconnaissance des émotions. Cette approche de traitement des données conduit à une génération d'information de meilleure qualité et plus fiable que celle obtenue à partir d'une seule modalité. Les résultats expérimentaux montrent une amélioration significative des taux de reconnaissance des huit émotions par rapport aux résultats obtenus avec l'approche monomodale. Enfin nous avons intégré notre travail dans une application de détection de la dépression des personnes âgées dans un habitat intelligent. Nous avons utilisé les signaux physiologiques recueillis à partir de différents capteurs installés dans l'habitat pour estimer l'état affectif de la personne concernée.

Mémoire numérisé par la Direction des bibliothèques de l'Université de Montréal.

Mémoire numérisé par la Direction des bibliothèques de l'Université de Montréal.

Mémoire numérisé par la Direction des bibliothèques de l'Université de Montréal.

Mémoire numérisé par la Direction des bibliothèques de l'Université de Montréal.

De nombreux travaux en psychologie cognitive, et plus tardivement en marketing ont permis de mettre en évidence le rôle prépondérant de l’imagerie mentale. Deux courants de recherches existent, le premier est relatif aux effets de l’imagerie mentale sur la mémorisation de l’individu ; le second, moins développé, aux effets de l’imagerie mentale sur les réponses attitudinales et comportementales. L’analyse des contributions et théories existantes a permis d’identifier la présentation d’un produit sur un site marchand par stimuli iconique et verbal, ainsi que le type de produit comme antécédents à l’imagerie et comme déterminants potentiels des réponses comportementales du consommateur. Une recherche qualitative exploratoire est réalisée afin de conforter ou compléter le modèle de recherche proposé sur cette base. Les résultats de cette phase initiale mettent en avant plusieurs caractéristiques relatives à la présentation du produit, ainsi que les réponses émotionnelles et cognitives à l’imagerie mentale (respectivement les émotions anticipées et la valeur perçue du produit) et leurs influences sur le comportement du consommateur. Les hypothèses et le modèle final sont ensuite développés et testés empiriquement auprès d’une cible de prospects de l’entreprise-partenaire. Les résultats révèlent que l’imagerie mentale et ses réponses émotionnelles et cognitives, ainsi que la présentation du produit et le type de produit influencent l’impulsion et l’intention d’achat du consommateur. Les réponses comportementales varient selon les combinaisons image-mots employées. Les implications académiques et managériales sont développées et plusieurs voies de recherche sont proposées. / Many studies in cognitive psychology, and more recently in marketing support the role of mental imagery. There are two research streams, the first relates to the effects of mental imagery on memorization of the subject, the second less developed, links to the effects of mental imagery on the attitudinal and behavioral responses. Analysis of the contributions and existing theories identified the presentation of a product on a website by iconic and verbal stimuli, and the type of product as imagery antecedents and as potential determinants of behavioral responses of consumers. A qualitative exploratory research is then done in order to confirm or complete the research model proposed on this basis. This work revealed several characteristics relating to the presentation of the product, and emotional and cognitive responses to imagery (respectively the anticipated emotions and the perceived value of product) and their influences on consumer behavior. Several hypothesis and a final model are then developed and empirically tested with a prospective target business partner. The results revealed that mental imagery and its emotional and cognitive responses, and the presentation of the product (iconic and verbal stimuli) and the product type (private or public consumption) influence the impulse purchase and purchase intent of consumers. Behavioral responses vary from picture-words combinations used. Academic and managerial implications are developed and several research directions are suggested.