O Bipolar de James Alliban apresenta um espelho audiovisual que gera uma paisagem sonora a partir da presença e movimento de seus sujeitos. Os dados de áudio resultantes (incluindo os do participante) são usados para transformar o corpo em um retrato distorcido que flutua entre os estados de caos e ordem. O vídeo também faz um trabalho tremendamente eficaz de capturar o fascínio infinito dos participantes com a instalação, proporcionando gratificação instantânea e uma sensação de infinitas possibilidades.
Como surgiu a ideia para este vídeo?
Esta peça começou como um experimento. Eu estava falando em um festival de design e fui convidado (junto com os outros oradores) para montar um pequeno vídeo de “obrigado por vir” para tocar no final do evento. Eu queria fazer algo um pouco mais interessante do que simplesmente falar no meu smartphone. Originalmente, planejei fazer um aplicativo de rastreamento de rostos que distorcia e levantava meu rosto em resposta ao meu discurso. Com o tempo, mudei isso para uma experiência de corpo inteiro usando a câmera Kinect.
Eu me deparei com esse efeito que parecia tão dramático que decidi investigar mais e publicar Bipolar (assim chamado por causa das constantes flutuações entre estados de ordem e caos) na forma de um pequeno vídeo. As pessoas começaram a se interessar em exibir a peça, então eu a modifiquei para me tornar uma instalação. O projeto tornou-se um esforço colaborativo quando Liam Paton, da Silent Studios, acrescentou um aspecto sonoro interativo. Foi exibido em vários eventos e exposições desde então.
Nós amamos nos enganar, então nos delicie, o que estamos vendo aqui?
O efeito básico não está muito envolvido. Eu uso openFrameworks que é um kit de ferramentas de programação baseada em artes C ++. Cerca de 30 vezes por segundo, os dados de profundidade e o feed de vídeo de uma câmera Xbox Kinect são combinados para criar um modelo 3D dos visitantes. Eu uso os dados de som vindos do microfone para extrudar cada segundo ponto no modelo 3D. Os pontos são extrudados na direção em que estão voltados para fornecer uma estética espacial que não é realmente possível com os dados de uma câmera padrão.
Além disso, envolve-se bastante. Há muito mais acontecendo nos bastidores. Eu utilizo o poder da placa gráfica para suavizar o modelo 3D e calcular um monte de dados que aceleram o aplicativo e geralmente melhoram a aparência da peça. Eu tenho uma interface de usuário dentro do aplicativo com cerca de 15-20 páginas de botões e controles deslizantes que me permitem ajustar a peça até que eu esteja satisfeito. Em termos de som, o movimento do participante é calculado e enviado para um software separado construído em Max / MSP por Liam. Ele então cria a paisagem sonora torcida com base na quantidade de atividade e vários outros fatores, como localização e proximidade. Este áudio é então captado pelo microfone junto com qualquer outro som no ambiente e visualizado no corpo do sujeito.
Qual foi o aspecto mais satisfatório, para você, sobre essa peça em particular?
Enquanto o processo de aprendizagem e o ato de descoberta e serendipidade foram muito agradáveis, a melhor parte deste projeto foi o resultado final. Assistir as pessoas a descobrir e interagir com a instalação pela primeira vez é uma experiência maravilhosa, que eu aprecio para cada peça que ofereço ao público. Anonimamente, de pé na parte de trás da sala e observando as pessoas desfrutarem de uma experiência inesperada que eu trabalhei duro para criar é sempre muito gratificante.
Qual foi a última grande coisa que você leu, viu ou ouviu?
Fui ver a nova peça da Universidade da Virgínia "Momentum" na galeria Barbican's Curve recentemente. Consiste numa série de 12 pêndulos mecânicos leves que oscilam uniformemente no espaço escuro. O efeito foi muito contemplativo e, para mim, pelo menos, um pouco estranho devido ao comportamento não natural desses holofotes lentos.
Qual é o próximo?
Estou falando com alguns curadores sobre a exibição do Bipolar e, enquanto isso, continuo explorando novas maneiras de representar o corpo por meio da interatividade. Eu estou trabalhando em vários projetos no momento, alguns dos quais estão prestes a cair em breve, então fique de olho.