Experiencing the YMYI artefact

The YMYI artefact proposes a body dialogue between a user and a digital system, based on a live performance with gestures and movements within an interactive space. Thus, YMYI aims at exploring a space where a user develops an ongoing creative process duly synchronised with his own motion actions.

By entering a so-called “stage”, where the YMYI interactive installation takes place, the user meets, at a first glance, a whole regiment of particles flying in diverse directions and speed throughout the digital system. Within the experiencing sphere of the interaction itself, the user sees his own anatomic silhouette embodied in the canvas, in the shape of lines and curves. Meanwhile, the user realises that his gestures and movements, actually synchronised with his own physical displacement within the interactive “stage”, migrate in real time to the canvas. The performance acquires new shapes and contours. The space opens itself to tridimensionality. By moving leftwards or rightwards, upwards or downwards, the displayed interactive “me” goes hand in hand with the user´s own theatrical actions. The system becomes a stage which lets the emotion and the creativity come in. The living experience is unique and subjective.

The dramatic emphasis of the performance deepens: gestures embed themselves in sounds created by the body, like breathing, walking, standing up, hiding, as if we one was dealing with a contemporary dance performance.

The huge number of particles moving around the user fill in the scene background. They seem to have a life of their own, featuring living, dynamic and electrifying properties. Such particles tend to concentrate themselves in the edges of both the superior and inferior limbs. Feet and hands become a converging magnet able to attract and join them in a collective “bubble”. It is as if they behaved as a physical extension of the user´s body or embodiment. Thus, both particles and user form a single, united element, shining glamorously throughout the interface.

In this interactive scope, the user realises that light/soft movements bring on greater interactivity and emotion. Such an experience is “affordable” by the natural convergence of the whole particles throughout the given parts of the user body as a result from his gestures. If we try moving the left hand or the right one, or even the left foot or right one, the particles flow to each one of their edges accordingly. If we try to put our hands or arms in a downwards position, the particles flow upwards until they reach an upper position – the user´s own head. The interaction is experienced in a richer, more creative and more artistic way.

Another outstanding feature belonging to the interactive experience is actually the sound. In the YMYI artefact, we experience a synchronising sound reactive to the gestures dynamics of the user himself. The sound emits low in pitch or sharp frequencies, responding in real time to the user´s position, whether he is standing (upwards) or sitting/hiding ( downwards), respectively. Right on the top of the canvas, a sensitive sound to the touching facility of the user has the ability to project a sonorous lightning flash whose energy goes through the inner self.

In the artefact YMYI, the sound is a sole element which travels in harmony through the flowing gestures of the user within the interactive space so as to provide guidance and “affordance” to the user himself, in its artistic dimension. If the user stops moving, the sound concentrates in itself an ongoing powerful energy which provides a growing amplitude, whether in low pitch or sharp frequencies, which on their turn, become reactive to and at the same time dependent on the inferior or superior position of the user´s embodiment limbs, respectively.

The sound provides a multimodal enrichment to the whole interactive experience and creates by itself together with image and movement an interactive guide to the appropriation, exploration, knowledge and live experience of the artefact.



João Martinho Moura, Jorge Sousa, March 2008

Vivência experiencial do artefacto YMYI

O artefacto YMYI enceta um diálogo corporal de um utilizador com um sistema digital, do qual resulta uma performance baseada em gestos e movimentos do mesmo num espaço interactivo. A instalação YMYI visa, então, a exploração de um espaço onde um utilizador desenvolve todo um processo criativo que se auto-recria continuamente em sincronização com as suas próprias acções motoras.

Ao entrar no "palco" de instalação interactivo do artefacto YMYI, o utilizador depara-se, numa primeira visão, com um regimento de partículas que se auto-propagam em múltiplas direcções e velocidades pela interface do sistema digital.
Dentro do espaço vivencial da experiência interactiva, o utilizador vê representado na tela a sua silhueta anatómica, ou o seu "embodiment", devidamente definidos em linhas e curvas. Entretanto, o utilizador nota que os seus gestos e movimentos sincronizados, com o seu deslocamento físico no "palco" interactivo, migram em tempo real para a tela. A representação, propriamente dita, começa a assumir novos contornos e formas. O espaço abre-se à tridimensionalidade. Ora movendo-se para a esquerda, para a direita, para cima ou para baixo, o "eu" interactivo projectado acompanha a própria teatralização das acções do utilizador. O sistema torna-se um palco que deixa a emoção e a criatividade artística instalar-se. A vivência é única, subjectiva, intransmissível.

A carga dramática da representação acentua-se: os gestos misturam-se com os sons gerados pelo corpo, como o respirar, o andar, o levantar, o esconder, como se estivéssemos perante uma dança performativa contemporânea.

As inúmeras partículas que se movimentam à volta do utilizador criam, por sua vez, o pano de fundo da cena. Parecem ter vida própria, apresentando características vivas, dinâmicas, electrizantes, pois não param de se movimentar e encher continuamente todo o background. Tais partículas apresentam uma predisposição especial para se concentrarem nas extremidades dos membros superiores e inferiores. As mãos e pés do utilizador funcionam como um íman convergente que as atrai e que as concentra num colectivo. É como se fossem a extensão do próprio "embodiment" do utilizador.

Assim, partículas e utilizador formam um só elemento, indivisível, que "brilha" de forma resplandecente na tela.
Neste contexto interactivo, o utilizador vai percebendo que movimentos mais leves e/ou suaves implementam maior interactividade e emoção. Tal experiência é propiciada pela convergência natural das partículas em partes determinadas do corpo do utilizador em resultado dos seus gestos. Se movimentarmos a mão esquerda, ou a direita, ou o pé direito, ou o esquerdo, as partículas tendem a concentrar-se nas extremidades de cada um daqueles pontos, respectivamente. Se depusermos as mãos/braços em posição vertical, as mesmas partículas transportam-se para um plano que lhes é superior – a própria cabeça do utilizador. A interacção é vivida de uma forma mais rica, criativa e, fundamentalmente, artística.

Uma outra componente presente na vivência interactiva é, precisamente, o som. No artefacto YMYI, trata-se de um som síncrono reactivo à dinâmica gestual do utilizador. Num plano de posição inferior e superior do utilizador, o som impulsiona frequências graves e agudas, respectivamente. Lá no alto da tela, um som sensível ao toque do utilizador, tem a capacidade de projectar um flash sonoro relampejante que atravessa o íntimo do ser.

Em YMYI, o som é um elemento que se harmoniza plenamente com os gestos fluidos do utilizador no espaço de forma a guiar, acompanhar e complementar, na sua dimensão artística sonora, a performance do utilizador. À posição estática do utilizador, o som concentra e energiza continuamente uma amplitude sonora, ora em frequências mais graves ou mais agudas, reactivas à dependência posicional inferior ou superior do "embodiment" do utilizador, respectivamente.

O som contribui para o enriquecimento multimodal da experiência interactiva e constitui em conjugação com a imagem e o movimento um guia interactivo para a apropriação, a exploração, o conhecimento e a vivência experiencial do artefacto.



João Martinho Moura, Jorge Sousa, Março 2008








»» main page / página principal ««