1 |
Deep Neural Architectures for Automatic Representation Learning from Multimedia Multimodal Data / Architectures neuronales profondes pour l'apprentissage de représentation multimodales de données multimédiasVukotic, Verdran 26 September 2017 (has links)
La thèse porte sur le développement d'architectures neuronales profondes permettant d'analyser des contenus textuels ou visuels, ou la combinaison des deux. De manière générale, le travail tire parti de la capacité des réseaux de neurones à apprendre des représentations abstraites. Les principales contributions de la thèse sont les suivantes: 1) Réseaux récurrents pour la compréhension de la parole: différentes architectures de réseaux sont comparées pour cette tâche sur leurs facultés à modéliser les observations ainsi que les dépendances sur les étiquettes à prédire. 2) Prédiction d’image et de mouvement : nous proposons une architecture permettant d'apprendre une représentation d'une image représentant une action humaine afin de prédire l'évolution du mouvement dans une vidéo ; l'originalité du modèle proposé réside dans sa capacité à prédire des images à une distance arbitraire dans une vidéo. 3) Encodeurs bidirectionnels multimodaux : le résultat majeur de la thèse concerne la proposition d'un réseau bidirectionnel permettant de traduire une modalité en une autre, offrant ainsi la possibilité de représenter conjointement plusieurs modalités. L'approche été étudiée principalement en structuration de collections de vidéos, dons le cadre d'évaluations internationales où l'approche proposée s'est imposée comme l'état de l'art. 4) Réseaux adverses pour la fusion multimodale: la thèse propose d'utiliser les architectures génératives adverses pour apprendre des représentations multimodales en offrant la possibilité de visualiser les représentations dans l'espace des images. / In this dissertation, the thesis that deep neural networks are suited for analysis of visual, textual and fused visual and textual content is discussed. This work evaluates the ability of deep neural networks to learn automatic multimodal representations in either unsupervised or supervised manners and brings the following main contributions:1) Recurrent neural networks for spoken language understanding (slot filling): different architectures are compared for this task with the aim of modeling both the input context and output label dependencies.2) Action prediction from single images: we propose an architecture that allow us to predict human actions from a single image. The architecture is evaluated on videos, by utilizing solely one frame as input.3) Bidirectional multimodal encoders: the main contribution of this thesis consists of neural architecture that translates from one modality to the other and conversely and offers and improved multimodal representation space where the initially disjoint representations can translated and fused. This enables for improved multimodal fusion of multiple modalities. The architecture was extensively studied an evaluated in international benchmarks within the task of video hyperlinking where it defined the state of the art today.4) Generative adversarial networks for multimodal fusion: continuing on the topic of multimodal fusion, we evaluate the possibility of using conditional generative adversarial networks to lean multimodal representations in addition to providing multimodal representations, generative adversarial networks permit to visualize the learned model directly in the image domain.
|
2 |
Extensions entre séries principales p-adiques et modulo p d'un groupe réductif p-adique déployé / Extensions between p-adic and mod p principal series of a split p-adic reductive groupHauseux, Julien 11 December 2014 (has links)
Cette thèse est une contribution à l'étude des représentations p-adiques (c'est-à-dire continues unitaires sur des espaces de Banach p-adiques) et modulo p (c'est-à-dire lisses sur un corps fini de caractéristique p) d'un groupe réductif p-adique déployé G.Nous déterminons les extensions entre séries principales p-adiques et modulo p de G Pour cela, nous calculons le delta-foncteur H•OrdB des parties ordinaires dérivées d'Emerton relatif à un sous-groupe de Borel sur une série principale en utilisant une filtration de Bruhat.Nous déterminons également les extensions d'une série principale par une représentation ordinaire (c'est-à-dire obtenue par induction parabolique à partir d'une représentation spéciale du Levi tordue par un caractère), ainsi que les extensions de Yoneda de longueur supérieure entre séries principales modulo p sous une conjecture d'Emerton vraie pour GL2.Nous montrons de plus qu'il n'existe pas de « chaîne » de trois séries principales p-adiques ou modulo p distinctes de G. Pour cela, nous calculons partiellement le delta-foncteur H•OrdP relatif à un sous-groupe parabolique quelconque sur une série principale. En exploitant ce résultat, nous prouvons une conjecture de Breuil et Herzig sur l'unicité de certaines représentations p-adiques de G dont les constituants sont des séries principales, ainsi que son analogue modulo p.Enfin, nous énonçons une nouvelle conjecture sur les extensions entre représentations modulo p irréductibles de G obtenues par induction parabolique à partir d'une représentations supersingulière du Levi. Nous prouvons cette conjecture pour les extensions par une série principale. / This thesis is a contribution to the study of p-adic (i.e. unitary continuous on p-adic Banach spaces) and mod p (i.e. smooth over a finite field of characteristic p) representations of a split p-adic reductive group G.We determine the extensions between p-adic and mod p principal series of G. In order to do so, we compute Emerton's delta-functor H•OrdB of derived ordinary parts with respect to a Borel subgroup on a principal series using a Bruhat filtration.We also determine the extensions of a principal series by an ordinary representation (i.e. parabolically induced from a special representation of the Levi twisted by a character), as well as the Yoneda extensions of higher length between mod p principal series under a conjecture of Emerton true for GL2.Moreover, we show that there exists no “chain” of three distinct p-adic or mod p principal series of G. In order to do so, we partially compute the delta-functor H•OrdP with respect to any parabolic subgroup on a principal series. Exploiting this result, we prove a conjecture of Breuil and Herzig on the uniqueness of certain p-adic representations of G whose constituents are principal series, as well as its mod p analogue.Finally, we formulate a new conjecture on the extensions between irreducible mod p representations of G parabolically induced from a supersingular representation of the Levi. We prove this conjecture for extensions by a principal series.
|
Page generated in 0.1423 seconds