[pt] Uma das áreas de grande destaque dentro da Computação Ubíqua é a de aplicações multimídia para Captura & Acesso (C&A). Essas aplicações permitem a captura de uma experiência ao vivo, normalmente em ambientes instrumentados, para seu acesso no futuro. Dessa forma transfere-se para os computadores a responsabilidade de gravar o evento, permitindo que as pessoas tenham seu foco de atenção na compreensão e interpretação da experiência em si, sem se preocupar com a tarefa de registrar a informação. A literatura apresenta muitas ferramentas que permitem a geração automática de documentos multimídia como resultado da captura de um evento, e esses mesmos documentos são usados como base para navegação e busca sobre o conteúdo armazenado. Tipicamente, essas ferramentas de C&A geram documentos que oferecem uma navegação com base apenas na linha de tempo (timeline) do evento registrado. Esta dissertação propõe uma infraestrutura genérica de C&A, baseada em serviços reutilizáveis e intercambiáveis, que explora os recursos oferecidos pela linguagem NCL para investigar novos paradigmas na engenharia de documentos produzidos por aplicações de C&A, através da estruturação dos documentos em modelos conceitual, navegacional e de apresentação. Utilizamos a linguagem NCL tanto para registrar o sincronismo entre as diferentes mídias gravadas, quanto para gerar diferentes formas de navegação e apresentação do conteúdo gravado. Os modelos de navegação e apresentação são gerados com base em metadados fornecidos pelo usuário ou extraídos automaticamente do conteúdo gravado. / [en] One of the areas of most evidence in Ubiquitous Computing is multimedia applications of Capture & Access (C&A). This kind of application allows the capture of a live experience, usually in smart rooms, for future access. In this way, the responsibility for recording the event is transferred to the computing infrastructure, allowing users to focus their attention in the comprehension and interpretation of the experience itself, without worrying about registering the information. The literature presents many software systems allowing the automatic generation of hypermedia documents as the result of an event capture, using the same documents as the basis for navigation and search of the archived content. Typically these C&A applications generate documents that offer only a timeline navigation of the captured event. This dissertation proposes a general C&A infrastructure, based on reusable and interchangeable services, which explores the features offered by the NCL language (standard language of the Brazilian Digital TV) to investigate new paradigms in C&A documents engineering. This is accomplished by structuring the generated documents in conceptual, navigation and presentation models. The NCL language is used to represent the synchronism between the different recorded media as well as to generate different ways to navigate and present the recorded content. These models of navigation and presentations are based on metadata provided by the user or automatically extracted from the recorded content.

[pt] A diminuição do custo e a diversificação dos dispositivos computacionais vêm criando ambientes de computação cada vez mais completos e sofisticados, mas que ainda carecem de softwares de integração que simplifiquem sua utilização e que melhor explorarem seu potencial. Para responder a esta questão, sistemas de computação ubíqua vêm sendo desenvolvidos para criar mecanismos de controle remoto e unificado de aplicações e dispositivos. Além disso, grupos de pesquisa na área de multimídia abordam outras questões como a sincronização entre dispositivos, gerência de recursos e definição de padrões de documentos. Este trabalho visa unificar os esforços de ambas as áreas com o objetivo de realizar apresentações multimídia através do paradigma de computação ubíqua. Neste trabalho, apresentamos a infraestrutura de execução de apresentações ActivePresentation desenvolvida e baseada em diferentes protótipos. Além disso, propomos um formato de documento multimídia chamado NCLua para orquestrar tais apresentações. / [en] The diminishing costs and the diversity of computational devices are creating increasingly complex and sophisticated computational environments. Nonetheless, such environments still lack integration software to simplify their use and to better explore their potential. In response to this issue, ubiquitous computing systems are being developed to create remote control mechanisms of applications and devices. At the same time, research groups in the area of multimedia deal with other issues, such as synchronization between devices, resource management and document standard definitions. The purpose of this work is to join the efforts of both areas in order to build presentations using the ubiquitous computing paradigm. In this work, we introduce the ActivePresentation infrastructure, based and developed through the study of different prototypes. In addition, we propose a multimedia document format called NCLua to orchestrate such presentations.

[pt] Tecnologias de vídeos bidimensionais (2D) têm evoluído rapidamente nos últimos anos. Apesar disso, elas não permitem uma visão realista e imersiva do mundo, pois não oferecem importantes dicas de profundidade para o sistema visual humano. Tecnologias de vídeo tridimensionais (3D) têm como objetivo preencher essa lacuna, provendo representações que permitem a reprodução de informações de profundidade em displays 3D. Embora a representação baseada em vídeos estereoscópicos ainda seja a mais utilizada até o momento, novas representações de vídeo 3D têm emergido, tais como MVV (Multi-view video), 2D plus Z (2D plus depth), MVD (Multi-view plus depth) e LDV (Layered-depth video). A integração de aplicações multimídia com mídias 3D tem o potencial de permitir novos conteúdos interativos, novas experiências com o usuário e novos modelos de negócio. Nesta tese, duas abordagens para a integração de aplicações multimídia em cadeias de transmissão de vídeo 3D fim-a-fim são propostas. Primeiro, uma abordagem que é compatível com cadeias de transmissão de vídeo 3D baseado em vídeos estereoscópicos é discutida. A proposta consiste em extensões para linguagens multimídia 2D e um processo de conversão de aplicações multimídia 2D para sua versão estereoscópica. Essa proposta não requer nenhuma alteração no exibidor de linguagens multimídia 2D para a apresentação de mídias estereoscópicas. Em uma segunda abordagem, extensões adicionais a linguagens multimídia também são propostas visando a integração de aplicações multimídia em cadeias de vídeo 3D baseado em profundidade (2D plus Z ou LDV). Além disso, uma arquitetura para a composição gráfica dessas aplicações, baseada no conceito de LDV e que permite a integração de objetos de mídia baseado em profundidade em exibidores de aplicações multimídias é apresentada. Como um exemplo de aplicação prática das proposta desta tese, ambas são implementadas e integradas em um sistema de vídeo 3D fim-a-fim baseado no Sistema Brasileiro de TV Digital. / [en] Two-dimensional video technologies have evolved quickly in the last few years. Even so, they do not achieve a realistic and immersive view of the world since they do not offer important depth cues to the human vision system. Three-dimensional video (3DV) technologies try to fulfill this gap through video representations that enable 3D displays to provide those additional depth cues. Although CSV (Conventional Stereoscopic Video) has been the most widely-used 3DV representation, other 3DV representations have emerged during the last years. Examples of those representations include MVV (Multi-view video), 2D plus Z (2D plus depth), MVD (Multi-view plus depth), and LDV (Layered-depth Video). Although end-to-end 3DV delivery chains based on those 3DV formats have been studied, the integration of interactive multimedia applications into those 3DV delivery chains has not yet been explored enough. The integration of multimedia applications with 3D media using those new representations has the potential of allowing new rich content, user experiences and business models. In this thesis, two approaches for the integration of multimedia applications into 3DV end-to-end delivery chains are proposed. First, a backward-compatible approach for integrating CSV-based media into 2D-only multimedia languages is discussed. In this proposal, it is possible to add depth information to 2D-only media objects. The proposal consists of extensions to multimedia languages and a process for converting the original multimedia application into its stereoscopic version. It does not require any change on the language player and is ready-to-run in current CSV-based 3DV delivery chains and digital receiver s hardware. Second, extensions to multimedia languages based on layered-depth media are proposed and a software architecture for the graphics composition of multimedia applications using those extensions is presented. As an example, both proposals are implemented and integrated into an end-to-end 3DV delivery chain based on the Brazilian Digital TV System.