Return to search

[en] AN ARCHITECTURE FOR ENHANCING REAL-TIME MULTIMEDIA FLOWS WITH SEMANTIC INFORMATION / [pt] UMA ARQUITETURA PARA O ENRIQUECIMENTO DE FLUXOS MULTIMIDIA EM TEMPO REAL COM INFORMAÇÕES SEMÂNTICAS

[pt]
Embora os sistemas multimídia tradicionais se concentrem na codificação
e no armazenamento eficientes de tipos de mídia e suas relações temporais,
a demanda atual por experiências mais ricas e personalizadas exige uma
compreensão mais profunda do conteúdo semântico dessas mídias. Neste
estudo, propomos a integração do processamento de nível semântico aos
sistemas multimídia, enriquecendo o conteúdo com informações sobre entidades
do mundo real, como objetos, ações, agentes e interpretação de linguagem. A
principal contribuição desta dissertação é a apresentação de uma arquitetura
para enriquecimento de dados multimídia em tempo real que usa técnicas de
aprendizado de máquina para extrair representações semânticas incorporando as ao fluxos de dados multimídia como um serviço nativo e básico. Para
demonstrar concretamente a proposta, implementamos dois casos de uso que
servem como provas de conceito, mostrando a viabilidade da arquitetura e sua
eficácia em cenários práticos. / [en] While traditional multimedia systems focused on efficient coding and
storage of media types and their temporal relationships, the current demand for
rich and customized experiences calls for a deeper understanding of semantic
content. In this study, we propose the integration of semantic-level processing
into multimedia systems, enriching content with information about real-world
entities, such as objects, actions, agents, and language interpretation. The main
contribution of this dissertation is the proposal of an architecture for real-time
multimedia data enhancement that is able to use machine learning techniques
to extract semantic representations and incorporating it into multimedia data
streams as a native and basic service. To provide a concrete demonstration
of the proposal, we implement two use cases that serve as proofs-of-concept,
showing the feasibility of the architecture and showcasing its effectiveness in
practical scenarios.

Identiferoai:union.ndltd.org:puc-rio.br/oai:MAXWELL.puc-rio.br:64987
Date21 November 2023
CreatorsJOSE MATHEUS CARVALHO BOARO
ContributorsSERGIO COLCHER
PublisherMAXWELL
Source SetsPUC Rio
LanguageEnglish
Detected LanguagePortuguese
TypeTEXTO

Page generated in 0.0021 seconds