La présente thèse étudie la modélisation conjointe des contenus visuels et textuels extraits à partir des documents multimédias pour résoudre les problèmes intermodaux. Ces tâches exigent la capacité de ``traduire'' l'information d'une modalité vers une autre. Un espace de représentation commun, par exemple obtenu par l'Analyse Canonique des Corrélation ou son extension kernelisée est une solution généralement adoptée. Sur cet espace, images et texte peuvent être représentés par des vecteurs de même type sur lesquels la comparaison intermodale peut se faire directement.Néanmoins, un tel espace commun souffre de plusieurs déficiences qui peuvent diminuer la performance des ces tâches. Le premier défaut concerne des informations qui sont mal représentées sur cet espace pourtant très importantes dans le contexte de la recherche intermodale. Le deuxième défaut porte sur la séparation entre les modalités sur l'espace commun, ce qui conduit à une limite de qualité de traduction entre modalités. Pour faire face au premier défaut concernant les données mal représentées, nous avons proposé un modèle qui identifie tout d'abord ces informations et puis les combine avec des données relativement bien représentées sur l'espace commun. Les évaluations sur la tâche d'illustration de texte montrent que la prise en compte de ces information fortement améliore les résultats de la recherche intermodale. La contribution majeure de la thèse se concentre sur la séparation entre les modalités sur l'espace commun pour améliorer la performance des tâches intermodales. Nous proposons deux méthodes de représentation pour les documents bi-modaux ou uni-modaux qui regroupent à la fois des informations visuelles et textuelles projetées sur l'espace commun. Pour les documents uni-modaux, nous suggérons un processus de complétion basé sur un ensemble de données auxiliaires pour trouver les informations correspondantes dans la modalité absente. Ces informations complémentaires sont ensuite utilisées pour construire une représentation bi-modale finale pour un document uni-modal. Nos approches permettent d'obtenir des résultats de l'état de l'art pour la recherche intermodale ou la classification bi-modale et intermodale. / This thesis investigates the joint modeling of visual and textual content of multimedia documents to address cross-modal problems. Such tasks require the ability to match information across modalities. A common representation space, obtained by eg Kernel Canonical Correlation Analysis, on which images and text can be both represented and directly compared is a generally adopted solution.Nevertheless, such a joint space still suffers from several deficiencies that may hinder the performance of cross-modal tasks. An important contribution of this thesis is therefore to identify two major limitations of such a space. The first limitation concerns information that is poorly represented on the common space yet very significant for a retrieval task. The second limitation consists in a separation between modalities on the common space, which leads to coarse cross-modal matching. To deal with the first limitation concerning poorly-represented data, we put forward a model which first identifies such information and then finds ways to combine it with data that is relatively well-represented on the joint space. Evaluations on emph{text illustration} tasks show that by appropriately identifying and taking such information into account, the results of cross-modal retrieval can be strongly improved. The major work in this thesis aims to cope with the separation between modalities on the joint space to enhance the performance of cross-modal tasks.We propose two representation methods for bi-modal or uni-modal documents that aggregate information from both the visual and textual modalities projected on the joint space. Specifically, for uni-modal documents we suggest a completion process relying on an auxiliary dataset to find the corresponding information in the absent modality and then use such information to build a final bi-modal representation for a uni-modal document. Evaluations show that our approaches achieve state-of-the-art results on several standard and challenging datasets for cross-modal retrieval or bi-modal and cross-modal classification.

René Burri est un photoreporter, membre de l’Agence Magnum Photos depuis 1955. Certaines de ses photographies sont aujourd’hui considérées comme des icônes de l’histoire de la photographie. L’analyse du système de diffusion de son travail, à travers la presse illustrée, tentera de répondre à la question de la fabrique de ces images en tant que symboles. Cette dense production est traitée en quatre chapitres. Le premier introduit le contexte photographique et éditorial dans lequel arrive René Burri, en 1955. Le deuxième suit l’ordre des publications liées à une prise de vue photojournalistique, événement après événement. Le troisième accompagne, thématiquement, les sujets développés par le photoreporter, quand le troisième replace la photographie au moment de sa reconnaissance institutionnelle. Le travail de René Burri subit dès lors, par la presse illustrée, une sélection par l’icône.Quelle est la relation entre l’œuvre de René Burri et la presse illustrée ? L’analyse des politiques éditoriales des plus grands titres de la deuxième moitié du XXe siècle soutient le discours et atteste de la place de la photographie de René Burri dans la presse illustrée. Cette recherche, au corpus inédit, permet de montrer l’œuvre du photographe sous une approche singulière et, au- delà, permet de voir en quoi la presse illustrée participe à un mode de diffusion exclusif de certaines photographies. En effet, certains clichés, qui avait été sujets à de nombreuses publications sont aujourd’hui oubliés, alors que d’autres, qui n’avaient pas été publiées au moment de leur réalisation, sont aujourd’hui, avec quelques unes qui résonnent toujours, représentatives du parcours du photoreporter. / René Burri, member of Magnum Photos agency since the middle of the fifties, is a famous photographer. Thanks to an exhaustive inventory of all of his published production, the study will bring it out. Through the analysis of the way the work of this swiss photographer has been edited, we could understand how, today, some pictures are kind of iconic. Four chapters analyse this dense production. The first one introduces the photographic and editorial context in which René Burri begins working in 1955. The second, following the order of the publications, event after event, deals with a photojournalistic photography. The third one handles the investigation photography of René Burri, trough a thematic construction. The last section is about the institutional recognition of the photography as an Art, so as some of the photographs are published like pieces of a photographic heritage. René Burri’s work is then broadcasted undergoing an iconic selection. What is the relationship between the work of René Burri and periodicals? The analysis of some greatest titles of the second half of twentieth century’s editorials politics attests of the importance of photography; and furthermore, of René Burri’s pictures. Through an unpublished corpus, the purpose of this study is to show the work of the photograph through an original approach; and, beyond, to see how the press can give a selective vision of this work. Indeed, some of photographs often published by the past are now unknown, although others, which did not appear in periodicals at the moment they were taken, are now very famous. Today, those ones, among vintages ones that still echoe, are representatives of René Burri’s work.