Defesa de Tese de Doutorado de Rômulo Augusto Vieira Costa, 25/11/2025, 08:00h, por videoconferência
Link para defesa: https://meet.google.com/rfu-dazx-obc
Internet of Multisensory, Multimedia and Musical Things (Io3MT) Environments: Requirements, Use Cases, and Evaluation
Resumo:
A Internet das Coisas Multissensoriais, Multimídia e Musicais (Io3MT) constitui um domínio de pesquisa emergente que resulta da confluência de distintas áreas do conhecimento, tais como a Internet das Coisas Multimídia (IoMT), a Internet dos Sons (IoS), a Networked Music Performance (NMP), a Mulsemedia (Multiple Sensorial Media), as Redes de Sensores Sem Fio (WMSNs), a Realidade Estendida (XR) e a Arte Interativa. Sob uma perspectiva computacional, a Io3MT pode ser compreendida como uma rede de transmissão que integra, em um mesmo ecossistema, dispositivos e dados capazes de explorar os cinco sentidos humanos (tato, audição, visão, olfato e paladar), conteúdos multimídia e informações sonoras de forma intercambiável e não hierarquizada, disponibilizando aplicações e serviços de alcance global.
Esta tese apresenta o primeiro modelo de referência dedicado a esse domínio, delineando sua arquitetura padrão, os tipos de dados envolvidos, os requisitos de comunicação em rede e as ferramentas apropriadas à sua implementação. O propósito é fornecer diretrizes que permitam a cientistas, artistas, designers e profissionais da indústria conceber e desenvolver, de modo prático, ambientes fundamentados nos princípios da Io3MT.
Para validar a proposta, foram realizadas duas provas de conceito, cada uma explorando dimensões distintas do paradigma, nas quais se conduziram experimentos voltados à aferição da Qualidade de Serviço (QoS) e da Qualidade da Experiência (QoE). Esses experimentos envolveram um protótipo de dispositivo multissensorial e um cenário imersivo voltado à performance artística em tempo real. Os resultados obtidos confirmam a viabilidade técnica do modelo de referência, ao mesmo tempo em que demonstram seu potencial estético e expressivo, evidenciando a capacidade da Io3MT de sustentar experiências interativas, criativas e multissensoriais.
Abstract:
The Internet of Multisensory, Multimedia, and Musical Things (Io3MT) constitutes an emerging research domain arising from the convergence of diverse fields of knowledge, including the Internet of Multimedia Things (IoMT), the Internet of Sounds (IoS), Networked Music Performance (NMP), Mulsemedia (Multiple Sensorial Media), Wireless Multimedia Sensor Networks (WMSNs), Extended Reality (XR) and Interactive Art.
From a computational perspective, Io3MT can be understood as a transmission network that integrates, within a unified ecosystem, devices and data capable of engaging the five human senses (touch, hearing, vision, smell, and taste), multimedia content, and sonic information in an interchangeable and non-hierarchical manner, thereby providing globally accessible applications and services.
This thesis introduces the first reference model of this domain, outlining its standard architecture, data types, communication requirements, and the tools suitable for its implementation.
The objective is to establish guidelines that enable scientists, artists, designers, and industry practitioners to conceive and develop environments grounded in the principles of Io3MT.
To validate the proposed model, two proof-of-concept implementations were carried out, each addressing distinct dimensions of this paradigm. These implementations involved experiments aimed at assessing both Quality of Service (QoS) and Quality of Experience (QoE).
The experiments comprised a device prototype and an immersive environment designed for real-time artistic performance.
The results confirmed the technical feasibility of the reference model while also demonstrating its aesthetic and expressive potential, thereby highlighting Io3MT’s capacity to sustain interactive, creative, and multisensory experiences.
Banca examinadora:
Profa. Débora Christina Muchaluat Saade, UFF – Presidente
Prof. Célio Vinicius Neves de Albuquerque, UFF
Prof. Igor Monteiro Moraes, UFF
Prof. Pablo Santiago César Garcia, Universidade Técnica de Delft
Prof. Marcelo Ferreira Moreno, UFJF
Prof. Luca Turchet, Universidade de Trento