Thesis (Ph. D.)--Florida State University, 2004. / Advisor: Dr. James P. Jones, Florida State University, College of Arts and Sciences, Dept. of History. Title and description from dissertation home page (viewed July 9, 2004). Includes bibliographical references.

Thesis (M.S.)--Brigham Young University. Dept. of Computer Science, 2008. / Includes bibliographical references (p. 101-107).

Thesis (M.S.)--Brigham Young University. Dept. of Mechanical Engineering, 2007. / Includes bibliographical references (p. 124-125).

Th. doct.-ing.--Inform.--Toulouse--I.N.P., 1980. N°: 103.

Th. 3e cycle--Math. appl., inform.--Nancy 1, 1978. N°: 27.

Cette thèse traite de la reconnaissance automatique d'action humaine dans des vidéos. La reconnaissance d'action humaine est indispensable pour déterminer quelles actions humaines se produisent dans des vidéos. Ce problème est particulièrement difficile en raison d'énormes variations dans les aspects visuels et de mouvement des personnes et des actions, les changements de point de vue de la caméra, le fond mobile, des occlusions, la présence de bruit, ainsi que l'énorme quantité de données vidéos. Tout d'abord, nous passons en revue, évaluons et comparons les techniques les plus importantes et les plus populaires de l'état de l'art pour la reconnaissance d'action, ensuite, nous proposons une plateforme basée sur des caractéristiques locales, que nous utilisons tout au long de ce travail de thèse pour étudier de nouveaux algorithmes. En plus, nous introduisons une nouvelle base de données (Hôpital CHU de Nice) avec des actions de la vie quotidienne de patients âgés dans cet hôpital. Ensuite, nous proposons deux descripteurs spatio-temporels locaux pour la reconnaissance d'action dans les vidéos. Le premier descripteur est basé sur une représentation des matrices de covariance, modélisant les relations linéaires entre les caractéristiques bas niveaux. Le deuxième descripteur est basé sur les covariances browniennes, et modélise tous les types de relations possibles entre les caractéristiques bas niveaux. Après, nous proposons trois représentations de caractéristiques de hauts niveaux pour dépasser les limites des techniques utilisant l'encodage des sacs de mots. La première représentation est basée sur le principe des trajectoires relatives denses. Nous proposons une représentation objet-centrée des caractéristiques locales des trajectoires de mouvement, ce qui permet d'utiliser l'information spatiale par une technique de codage des caractéristiques locales. La deuxième représentation encode les relations entre les caractéristiques locales par paires. Le principe est dextraire les relations d'apparence entre les caractéristiques (à la fois visuelles et de mouvement), et dutiliser l'information géométrique pour décrire la façon dont ces relations d'apparence sont disposées mutuellement dans l'espace spatio-temporel. La troisième représentation calcule les statistiques des paires concomitantes des mots visuels dans les voisinages multi-échelles centrées les caractéristiques. La représentation basée sur les caractéristiques contextuelles proposées encode linformation sur la densité locale de ces caractéristiques, les relations entre les paires des caractéristiques locales et leur ordre spatio-temporel. Finalement, les techniques proposées permettent d'obtenir une performance meilleure ou semblable par rapport à l'état de l'art, sur des bases de données représentant une grande diversité dactions humaines (Weizmann, KTH, URADL, MSR Daily Activity 3D, HMDB51, et Hôpital CHU de Nice). / This thesis targets the automatic recognition of human actions in videos. Human action recognition is defined as a requirement to determine what human actions occur in videos. This problem is particularly hard due to enormous variations in visual and motion appearance of people and actions, camera viewpoint changes, moving background, occlusions, noise, and enormous amount of video data. Firstly, we review, evaluate, and compare the most popular and the most prominent state-of-the-art techniques, and we propose our action recognition framework based on local features, which we use throughout this thesis work embedding the novel algorithms. Moreover, we introduce a new dataset (CHU Nice Hospital) with daily self care actions of elder patients in a hospital. Then, we propose two local spatio-temporal descriptors for action recognition in videos. The first descriptor is based on a covariance matrix representation, and it models linear relations between low-level features. The second descriptor is based on a Brownian covariance, and it models all kinds of possible relations between low-level features. Then, we propose three higher-level feature representations to go beyond the limitations of the local feature encoding techniques. The first representation is based on the idea of relative dense trajectories. We propose an object-centric local feature representation of motion trajectories, which allows to use the spatial information by a local feature encoding technique. The second representation encodes relations among local features as pairwise features. The main idea is to capture the appearance relations among features (both visual and motion), and use geometric information to describe how these appearance relations are mutually arranged in the spatio-temporal space. The third representation captures statistics of pairwise co-occurring visual words within multi-scale feature-centric neighbourhoods. The proposed contextual features based representation encodes information about local density of features, local pairwise relations among the features, and spatio-temporal order among features. Finally, we show that the proposed techniques obtain better or similar performance in comparison to the state-of-the-art on various, real, and challenging human action recognition datasets (Weizmann, KTH, URADL, MSR Daily Activity 3D, HMDB51, and CHU Nice Hospital).

Cette recherche a pour objectif d'étudier le développement des capacités en langage, en théorie de l'esprit et en reconnaissance des émotions dans le syndrome de Williams (SW). Ce syndrome est un trouble génétique rare. Le SW se caractérise par un profil sociocognitif particulier associé à une déficience intellectuelle légère à modérée (Bellugi, Marks, Bihrle, & Sabo, 1988 ; Mervis & Bertrand, 1999). Le profil hypersocial caractéristique des personnes avec SW, en particulier leur attrait pour les visages et leur volonté d'interagir avec autrui, pourrait impacter la mise en place de leurs habiletés sociales et langagières. Ces différentes capacités ont été évaluées via 4 expériences chez un même groupe de 16 participants avec SW. Leurs performances ont été comparées à celles de 16 participants avec syndrome de Down, de 16 enfants typiques de même âge verbal et de 16 enfants typiques de même niveau de raisonnement non-verbal. À partir d'une approche d'appariement et de trajectoires développementales, l'analyse des résultats met en avant des compétences non préservées pour le groupe SW. Le lien entre langage et théorie de l'esprit dans le SW semble similaire à celui existant dans le développement typique. Toutefois, les comparaisons intersyndromiques révèlent des spécificités au niveau du profil sociocognitif du SW, notamment la production excessive d'évaluations sociales et leur bonne capacité à attribuer des émotions. Le comportement hypersociable et la facilité d'interaction des personnes avec SW semblent contribuer à surestimer leurs compétences sociocognitives et globales / This research aims to study the development of language, theory of mind and emotion recognition in Williams syndrome (WS). This syndrome is a rare neurodevelopmental disorder of genetic origins. The WS is characterized by a specific sociocognitive profile including mild to moderate intellectual disability (Bellugi, Marks, Bihrle, & Sabo, 1988 ; Mervis & Bertrand, 1999). The distinctive hypersocial phenotype of people with SW, in particular their attractiveness to the faces and their willingness to interact with others, may affect the development of their social and language skills. These different abilities were evaluated by 4 experiments with the same group of 16 participants with SW. Their performance was compared with that of 16 participants with Down syndrome, that of 16 typical children who were matched for verbal age and that of 16 typical children who were matched for non-verbal reasoning. Using a matching approach and developmental trajectories, the analysis of the results point out impaired skills for the WS group. The link between language and theory of mind in the SW seems similar to that existing in typical development. However, cross-syndrome comparisons reveal specificities in the socio-cognitive profile of WS, especially the excessive production of social engagement devices and their good ability to attribute emotions. The hypersocial behavior and ease of interaction of people with WS seem to contribute to overestimating their sociocognitive and global skills

Nous abordons de manière originale les conditions de la reconnaissance de soi, constitutive de l’émergence de la conscience de soi humaine par le biais d’une discordance observée en psychothérapie chez un jeune garçon de 7 ans et 4 mois, portant sur l’intégration des représentations de soi dans la situation spéculaire. Avec une méthodologie d'analyse du discours produit dans l’interaction, la logique interlocutoire (2007), nous recourons à la théorie des jeux d'investigation et de recherche développée par Hintikka (1976, 1984, 1998b) afin de proposer un modèle qui permette d'expliciter formellement la clinique des phénomènes mentaux observée chez le patient. Rétrospectivement nous questionnons le moment fécond, entre 18 et 36 mois, qui voit l’émergence d’un nouveau mode de fonctionnement de l’intentionnalité lorsque celle-ci intègre les propriétés du signe linguistique et en particulier, dans ce cadre, le statut du signifiant autoréférentiel dans la formation de la fonction du « je ». / We explore in an original way the conditions for self-recognition, from which human self-awareness emerges ; we do so by analyzing the discordance observed in psychotherapy in a boy of 7 years and 4 months : it relates to the integration of self-representations in a mirror-image situation. Using a discourse analysis methodology produced in interaction, the interlocutory logic (2007), we have recourse to the theory of investigation and research developed by Hintikka (1976, 1984, 1998b) , so as to offer a model that analyzes formally the clinical aspects of the mental phenomena observed in the patient. Retrospectively we ask questions about the fertile moment between 18 and 36 months, at which time a new form of intentionality emerges : it integrates the characteristics of linguistic signs and, in particular, in that context, the status of the self-referencing signifier in the formation of the function of “I'”.

Dans le cadre de cette thèse, nous proposons des approches géométriques permettant d’analyser des mouvements humains à partir de données issues de capteurs 3D. Premièrement, nous abordons le problème de comparaison de poses et de mouvements dans des séquences contenant des modèles de corps humain en 3D. En introduisant un nouveau descripteur, appelé Extremal Human Curve (EHC), la forme du corps humain dans une pose donnée est décrite par une collection de courbes. Ces courbes extraites de la surface du maillage relient les points se situant aux extrémités du corps. Dans un formalisme Riemannien, chacune de ces courbes est considérée comme un point dans un espace de formes offrant la possibilité de les comparer. Par ailleurs, les actions sont modélisées par des trajectoires dans cet espace, où elles sont comparées en utilisant la déformation temporelle dynamique. Deuxièmement, nous proposons une approche de reconnaissance d’actions et de gestes à partir de vidéos produites par des capteurs de profondeur. A travers une modélisation géométrique, une séquence d’action est représentée par un système dynamique dont la matrice d’observabilité est caractérisée par un élément de la variété de Grassmann. Par conséquent, la reconnaissance d’actions est reformulée en un problème de classification de points sur cette variété. Ensuite, un nouvel algorithme d’apprentissage basé sur la notion d’espaces tangents est proposé afin d’améliorer le système de reconnaissance. Les résultats de notre approche, testés sur plusieurs bases de données, donnent des taux de reconnaissance de haute précision et de faible latence. / In this thesis, we focus on the development of adequate geometric frameworks in order to model and compare accurately human motion acquired from 3D sensors. In the first framework, we address the problem of pose/motion retrieval in full 3D reconstructed sequences. The human shape representation is formulated using Extremal Human Curve (EHC) descriptor extracted from the body surface. It allows efficient shape to shape comparison taking benefits from Riemannian geometry in the open curve shape space. As each human pose represented by this descriptor is viewed as a point in the shape space, we propose to model the motion sequence by a trajectory on this space. Dynamic Time Warping in the feature vector space is then used to compare different motions. In the second framework, we propose a solution for action and gesture recognition from both skeleton and depth data acquired by low cost cameras such as Microsoft Kinect. The action sequence is represented by a dynamical system whose observability matrix is characterized as an element of a Grassmann manifold. Thus, recognition problem is reformulated as a point classification on this manifold. Here, a new learning algorithm based on the notion of tangent spaces is proposed to improve recognition task. Performances of our approach on several benchmarks show high recognition accuracy with low latency.

Route reconnaissance has been valuable for military commanders for centuries. Engineering forces are specifically tasked to gather route reconnaissance intelligence to present to the maneuver commander. US Army Engineers presently use a variety of highly technological methods to collect, process, and present this detailed route reconnaissance intelligence. This thesis examines and analyzes the capabilities of four reconnaissance groups. Using a matrix, each of the four units is ranked based on surveys of reconnaissance officers and on the personal experience of the author of this thesis. Results show that Unit 2 (FEST-M) is the most qualified unit to collect detailed geospatial route reconnaissance of the battlefield. The ARRK/TETK software system has helped this unit rise to the top over the other reconnaissance unit types analyzed. The need for geospatial route reconnaissance will continue to be a part of the modern day battlefield and will change constantly as technology is updated.