PANORAMIC RESEARCH |
Desenvolvimento de sistemas interativos em projeção panorâmica.
Artista Residente: Fernando Rabelo No sentido geral, um panorama (do grego <πανοραμα>) é uma ampla vista de um espaço físico.Também refere-se à representação de uma visão grande angular em qualquer meio: pintura, desenho, fotografia e vídeo. As pinturas panorâmicas são muito antigas e o termo foi originalmente cunhado pelo pintor Irlandês Robert Barker para descrever suas pinturas panoramicas de Edimburgo. Exididas em uma superfície cilindrica e visualizada em seu interior. Foram expostos diversos exemplares em Londres (1792) como "O Panorama". Através de uma residência artística realizada no Vrije Academie com apoio da Wold Wide Visual Factory foi pesquisado e desenvolvido um novo tipo de "Panorama" no qual ampliamos as possibilidades de criação audiovisual permitindo a interação entre/com as imagens no sistema de projeção digital. A montagem dos projetores em 360º foi configurada para conexão em um ou mais computadores em rede, fator que depende da qualidade das imagens. O software do sistema foi desenvolvido através de um programa modular "Isadora" que controla o hardware audiovisual e insere um elemento importante, a interatividade . O estudo potencializou a criação e a interação com imagens em diversos níveis de imersão. A maioria dos panoramas foram criados para mostrar em uma visão além da tela, moldura, comum nas artes visuais como a pintura, arquitetura e cinema e mostra momentos históricos com grandes níveis de detalhe que envolvem o visitante. A proposta de "Interactive Panoramic" é configurar inusitados ambientes em 360º que irão interagir com o público e espaço. Abaixo segue um resumo da sequência dos processos realizados : |
Três projeções montadas lado a lado para simular uma imagem semi-panorâmica com quicktime VR.
>> primeira semana (13 - 18 outubro) Na primeira semana da residência foram apresentados os departamentos de arte da Academia VRIJE como também a sala de trabalhos externos e o ambiente onde está instalado o Panorama 360º (este último, laboratório para a pesquisa apresentada). Funcionamento e teste dos equipamentos/hardwares disponibilizados pelo Virje Academia para a pesquisa: - Uma placa Matrox TripleHeadToGo: verificação da qualidade e da sincronia das imagens exibidas em três projetores ao mesmo tempo. As imagem foram processadas de forma bastante rápida em aplicações de quicktime VR (simulação bidimensional panorâmica) ou de imagens geradas por sistemas de partículas em 3 dimensões. Arquivos de alta qualidade utilizados em DVDs e HDTv não obtiveram a mesma performace, necessitando mais testes de compressões e formatos. |
Sala no Vrije Academie do panorama analágico composto por 10 projetores.
>> segunda semana (20 - 25 outubro) Após a montagem dos equipamentos na sala do Panorama 360º foi realizada uma série de pesquisas sobre materiais interativos necessários para a montagem do sistema. Foram adquiridos componetes como: - Microcontroladores Arduino (diversos modelos), A primeira série de testes dentro da estrutura do Panorama foi realizada com três dos 10 projetores montados. Neste momento foi levantada a demanda de um upgrade de hardware. Foram adquiridos uma placa interna Nvídia G-force 8800, 8 GB de memória RAM e uma webcam para testes de imagem em tempo real. A partir dessa etapa foram criados vários exemplos de programação de imagens a partir do software "Isadora" utilizando entradas de vídeo e áudio em tempo real para controlar sistemas de partículas 3D conforme a imagem abaixo. As partículas (pontos gerados por computação) são alteradas quanto ao movimento e tamanho de acordo com a quantidade de barulho produzida no local. Em silêncio as partículas são quase imperceptíveis e retilíneas, com o aumento do ruído exterior elas se tornam mais onduladas e ampliadas. |
Estudos em processing sofware: animações automáticas que se transformam a cada instante. Um som, como grito ou palma, reinicia o processo automático e aleatório..
>> terceira semana (27 - 31 outubro) Após o upgrade de hardware conseguimos montar 6 projeções em tempo real para realização de testes em diferentes aplicações. A partir da terceira semana foram criadas projeções para o novo ambiente de projeção panorâmica digital. Através das múltiplas possibilidades de projeção foram configurados sistemas com múltiplas janelas que contrapunham com a marcação gerada pela margem de encaixe de cada projetor. Como se trata de um sistema de projeção circular, a imagem de um projetor termina onde começa a de outro, os entremeios ficam levemente marcados. A idéia foi criar vídeos projetados em diversas perspectivas para distorcer e dificultar a divisão de telas e simular outras panorâmicas. O exemplo abaixo, "Panoramic Life", foi criado com o intuíto de fragmentar as projeções proporcionado uma visão cubista de uma realidade gravada em 30 minutos. Cada quadro abaixo é um momento entre 30 minutos, gravado posteriormente em mini-DV conectada à uma câmera de vigilância acoplada na cabeça. Esses momentos foram exibidos ao mesmo tempo proporcionando uma visão panorâmica de 20 vídeos em tempo real. Após o estudo a aplicação da pesquisa com imagens em mini-DV, foram realizados testes com criações de vetores e repetições infinitas em tempo real. Nesse sistema foi utilizado o software livre "Prossesing" que pode ser programado para gerar formas gráficas e infinitas. A imagem abaixo ilustra a programação em que a tela ficaria limpa ao som da palma de um visitante. |
>> quarta semana (03 - 07 novembro) Após os testes de imagens geradas por computador foi criado um sistema chamado de "Panoramic Big Brother" no qual os visitantes são envolvidos por imagens de seus próprios detalhes. As projeções se multiplicam compondo uma espécie de video-wall que proporciona uma multivisão da própria sala e simula um ambiente de centenas de câmeras vigiando o ambiente em questão. Ainda na quarta semana foram montadas as placas Matrox restantes (num total três placas). Para isso foi necessária a utilização de novos cabos DVI > VGA com 15 metros de comprimento cada. Os cabos são os conectores que levam o sinal digital à estrutura de colunas onde as placas Matrox estavam instaladas. |
Além das programações visuais foi desenvolvida uma interface (harware) de controle midi a partir de materias obsoletos e sensores adquiridos durante a pesquisa. O controle (imagem abaixo) pode ser configurado para manipular programas sintetizadores de áudio como, por exemplo, o Live - Ableton, M1 Le da Korg, entre outros midi-softwares (propícios para entrada de dados para música). Através do software "Isadora" o controle pode também ser usado para interação com vídeos e áudios em tempo real. Uma das aplicações desenvolvidas permite o controle de partículas 3D. Seu design foi projetado para desconstruir a imagem comum que temos dos joysticks utilizados na indústria da computação. Foram utilizados materiais que são habitualmente descartados, como, papelão e espuma de embalagens, para montagem da base. Além disso, a estrutura também contou com materiais modernos como, linhas de costura que conduzem a eletricidade, um microcontrolador arduino e sensores flexíveis. O controle foi desenvolvido como mostra a figura acima. Um sensor de toque e um de luz acionam valores de velocidade e ritmo. Duas barras de espuma (onde estão os sensores flexíveis) ao serem dobrados pelas mãos do usuário, produzem variações de tonalidade em áudio. A composição básica do controle agrega materiais obsoletos com hardwares e componentes eletrônicos de baixo custo e tecnologias open hardware (arduino e sensores). |
>> quinta semana (17 - 21 novembro) Para finalizar a programação dos 10 projetores do Panorama Digital foi realizada uma série de testes no hardware e nas placas de vídeo utilizando imagens e áudios e tamanhos e formatos diferentes. Foram testados arquivos de outros artistas que apresentaram trabalhos em DVD para observação do desempenho do sistema em outras mídias. Foi constatado que para utilização de arquivos em DVD, ou outros arquivos de grande extensão, será necessário utilizar um ou mais computadores que garantam o processamento paralelo e a exibição de arquivos em alta qualidade. Finalizada a pesquisa e a configuração do Panorama Digital foi feito um esboço da estrutura completa. O diagrama abaixo mostra a estrutura completa, incluindo hardware e esquema de exibição das telas. |
Esquema:
 |
A configuração final foi implementada na distribuição do sinal digital para os 10 projetores. Uma placa de aceleração gráfica Nvídia 8800 distribuiu 2 sinais (linhas vermelhas) que foram compartilhados por duas placas Matrox TripleHead e divididos para 6 projetores. A outra placa Nvídia 8800 distribuiu um sinal para a terceira placa Matrox TripleHead interligada à outros 3 projetores. O último projetor recebeu um sinal independente. Em síntese os sinais foram distribuídos no esquema 3+3+3+1 = 10. A placa de vídeo interna do computador (de fábrica) foi ligada á um monitor para monitoramento do sistema. A parte superior do gráfico significa a área entendida pelo sistema, na qual é formada uma grande tela com 10240 x 768 pixels dividida pelas placas em 3 de 3072x768 e uma de 1024x768. |
>> sexta semana (24 - 28 novembro) Nesta semana foi realizado um workshop sobre o software Isadora e a utilização de sensores. Uma oficina de introdução em ambientes interativos, teórica e prática, focada na construção de ambientes panorâmicos interativos. Conteúdo do Workshop: Workshop de introdução sobre Interação multimídia em tempo real. Será utilizado o software Isadora para criação e estudo das conexões entre áudio, vídeo e sensores. Não é necessário conhecimento anterior para participar do workshop. O aprendizado será através de exercícios práticos acompanhados passo a passo. dia 1 - Conexões do mundo físico. Sobre softwares de programação modular e conhecendo o Isadora. dia 2 - Experimentos interativos com áudio dia 3 - Experimentos interativos com vídeo dia 4 - O Microcontrolador Arduino - conexões físicas e conexões digitais. dia 5 - Faça você mesmo! - Isadora e arduino trabalhando juntos. Sensores e outros objetos para medir o mundo real. |
Get the flash player here: http://www.adobe.com/flashplayer |