Este trabalho apresenta duas soluções para a modelagem de um sistema de visualização para regência por controle gestual. Um feedback visual e gestual em tempo-real é gerado para o regente e a audiência, por intermédio da exibição de um conjunto de emissores de partículas e da trajetória percorrida...

Este trabalho apresenta duas soluções para a modelagem de um sistema de visualização para regência por controle gestual. Um feedback visual e gestual em tempo-real é gerado para o regente e a audiência, por intermédio da exibição de um conjunto de emissores de partículas e da trajetória percorrida pelos gestos capturados. O sistema desenvolvido visa facilitar a compreensão das composições musicais para grupos de instrumentos e vozes e enfatizar a importância do regente ao dirigir uma performance musical. Há dois tipos de entrada de dados: os gestos capturados a partir das mãos do regente, os quais são responsáveis pela definição do andamento e da dinâmica da orquestra; e um arquivo com informações musicais, o qual define quais notas cada instrumento musical deve tocar, contendo informações sobre a partitura de um arranjo para orquestra. Grupos de emissores de partículas representam as famílias da orquestra. A aparência das partículas é definida por elementos musicais e pela performance gestual do usuário. Além de testes funcionais, testes quantitativos e qualitativos foram realizados com regentes profissionais, outros músicos e usuários sem conhecimento musical formal. Os resultados obtidos mostram que é possível desenvolver um sistema gráfico por controle gestual, capaz de simular, em tempo real, uma peça musical representada por sistemas de partículas, de forma precisa e visualmente informativa.

Palavras-chaves: Controle Gestual, Sistemas de Partículas, Arranjo Orquestral, Visualização Interativa, Testes de Usabilidade.

This work presents two solutions for the modelling of a visualization system for music conducting through gesture control. A visual and gestural feedback in real time is generated for the conductor and the audience, through the display of a set of particle emitters and the path traveled by the...

This work presents two solutions for the modelling of a visualization system for music conducting through gesture control. A visual and gestural feedback in real time is generated for the conductor and the audience, through the display of a set of particle emitters and the path traveled by the captured gestures. The system we have developed aims to facilitate the understanding of musical compositions for instruments groups and voices, and to emphasize the importance of the conductor when directing a musical performance. There are two types of data inputs: the gestures captured from the hands of the conductor, which are responsible for setting the tempo and dynamics of the orchestra; and a file with musical information, which defines which notes each musical instrument should play, containing information about the score of an orchestral arrangement. Groups of particle emitters represent the orchestra families. The particles appearance is defined by musical elements and by the gestural performance of the user. In addition to functional tests, quantitative and qualitative tests were performed with professional conductors, other musicians and users without any formal musical knowledge. The results show that it is possible to develop a graphical system for gestural control, capable of simulating, in real time, a musical piece represented by particle systems, in a precise and visually informative way.

Keywords: Gesture Control, Particle Systems, Orchestral Arrangement, Interactive Visualization, Usability Testing.

Disponibilidade forma física: Existe obra impressa de código : 101935