Curso de Posgrado
Título:
"Nuevas Tecnologías aplicadas a la creación de Instalaciones y Performance Multimedia"
Control de Sonido y Video en Tiempo-Real usando sensores para captar movimiento.
Objetivo:
El objetivo de este curso es capacitar a los alumnos en el uso de nuevas tecnologías para la creación de Performance e Instalaciones Interactivas Multimedia. Para este fin es necesario que el alumno logre alcanzar los siguientes objetivos:
Conocimientos: que el alumnos conozca:
Habilidades: que el alumno domine:
Actitudes: que el alumno logre:
Producción: que el alumno:
Destinatarios:
Este curso está destinado a graduados (y alumnos avanzados) de las Carreras de Producción Multimedial, así como a otros graduados de la Facultad de Bellas Artes que posean conocimientos mínimos de programación.
Este curso está diseñado para aquellos egresados de las carreras de Bellas Artes que tengan experiencia en la producción artística o comunicativa mediante el uso de herramientas informáticas: egresados de carreras de áreas visuales que utilizan editores de imagen digital, herramientas CAD, editores no lineales de video, software de animación (2D o 3D), editores de páginas Web; o egresados de carreras de áreas musicales que dominen editores de sonido digital y secuenciadores MIDI; o egresados o alumnos avanzados de las carreras de multimedia (dado el tipo de prácticas exigidos durante su formación). En todos los casos se exige que el alumno del curso posea un dominio fluido de la computadora, dado que no se dictarán durante el mismo conocimientos básicos de computación (como el manejo del Sistema Operativo Windows y su interface) que serán dados por sabidos. Si bien se sugiere que el alumno domine aspectos básicos de la programación (como las estructuras IF-THEN-ELSE o el concepto de "variable") estos conocimientos serán de fácil adquisición por el alumno con experiencia en la edición digital en general, y por ende no se considera este requisito como excluyente.
El alumno debe poseer (o tener acceso a) una computadora con los requerimientos mínimos para ejecutar MAX, Arkaos y EyesWeb, es decir: Mínimo: PC Pentium 3 800Mhz 256Mb RAM, Sugerido: PC Pentium 4 2.4Ghz, 512 Mb de RAM, ambas c/ placa de sonido y video (preferentemente con salida TV). Sin este material el alumno se verá imposibilitado de resolver los Trabajos Prácticos.
Duración:
10 clases de 4 horas cada una, 8 teórico prácticas y 2 de consulta y corrección del trabajo final.
Evaluación:
Se solicitaran y evaluaran trabajos prácticos correspondientes a cada unidad temática.
Se exigirá, como evaluación final, la creación de un sistema interactivo en formato acordado entre los docentes y el alumno (instalación, video instalación, performance, etc). La aprobación del curso dependerá de la realización de este trabajo.
Equipamiento (para dictar el curso):
Fundamentación:
El enorme desarrollo de la tecnología digital ha permitido a los "nuevos medios" adquirir un potencial comunicativo nunca antes alcanzado, integrando al espectador con la obra y a ambos con el entorno. El incremento en la velocidad de procesamiento de información, la posibilidad de un acceso aleatorio de datos, el desarrollo de interfaces mas complejas y exactas y el aumento de la capacidad de almacenamiento permiten hoy una interacción mas fluida entre el ser humano y el sistema informático, la posibilidad de una interacción en tiempo real en donde se hace posible la percepción de los gestos más sutiles y las respuestas más complejas.
Los últimos desarrollos en Interacción Humano-Computadora (HCI) están mostrando una tendencia hacia la denominada "Mixed Reality" (Realidad Mixta), entornos que mezclan entornos virtuales con el mundo real formando un continuo entre entornos reales, realidad aumentada, virtualidad aumentada y entornos virtuales donde el espectador se encuentra inmerso con diferentes niveles de interacción, que van desde el simple recorrido hasta la modificación y la construcción.
Dentro de los Sistemas de Interacción Humano-Computadora, las instalaciones interactivas han adquirido en el último tiempo una importancia radical, este tipo de obras que vinculan el arte con la tecnología han permitido la explotación de los recursos tecnológicos, vinculándolos a un nueva forma narrativa no lineal que integra al espectador con la obra, que le permite ser al mismo tiempo observador, participante y co-creador de la misma. Este tipo de creaciones establecen un intercambio de acciones y reacciones entre el entorno (la parte virtual y física del sistema) y el actor-usuario, sustentada por la posibilidad de obtener una respuesta inmediata a partir de una acción. Es aquí donde han sido imprescindibles los avances en tecnologías para el control de sonido y video en tiempo real, al punto que sin estos avances no se podría pensar la Realidad Virtual.
Las obras que logran modelar la imagen y el sonido en función del movimiento gestual (ya sea de un participante como de un performer) se están convirtiendo en un nuevo tipo de expresión, en donde el concepto de instrumento (musical) se extiende al control del video y la imagen en general. Basta con ver la aparición (más allá de las fronteras académicas) de los VJ (Video Jockey) verdaderos DJ de la imagen, asociados a las fiestas rave y electrónicas en donde la multimedia impera. Por otro lado las interfaces trascienden el teclado y el mouse para dar lugar a pantallas sensibles, sensores que captan movimiento, uso de cámaras como sensores y otros tipos de dispositivos que permiten integrar todo el cuerpo (no sólo la mano) y el recorrido espacial del participante como parte del relato. De ahí que estas nuevas técnicas y formas expresivas esten atravesando a las artes escénicas como la danza, el teatro y la música, a la vez que agregan otra dimensión a la escultura y las instalaciones.
Cada vez más los artistas se inclinan por la creación de entornos multimedia interactivos. Esta nueva forma de expresión, que trae como novedades la dimensión del comportamiento y la integración del cuerpo (ya presentes quizás en el teatro pero que aquí adquiere el carácter de una modelización de la realidad y una integración del espectador al relato desde su acción), exige al creador el dominio de un amplio campo de conocimiento que va desde el procesamiento y control del sonido y la imagen hasta los lenguajes de programación, pasando por el estudio del movimiento y el gesto y el diseño de interfaces físicas; es decir una extraña amalgama entre el quehacer informático, comunicacional y artístico.
Un curso que establezca un marco adecuado para el aprendizaje y la profundización en estos temas y que a la vez permita adquirir las herramientas básicas para el diseño de este tipo de obras, se torna indispensable para quienes trabajan en el área de la multimedia y el arte relacionado con la tecnología, a fin de poder adquirir nuevos caminos de exploración. Trabajar sobre performance, instalaciones multimedia, realidad virtual, video instalaciones interactivas o creaciones similares implica conocer el sistema en su conjunto, lo que significa manejar las herramientas, técnicas y el lenguaje específico para poder conciliar la intención del creador con la obra terminada.
Frente al avance, en la última década, de estas nuevas interfaces aparece un creciente interés por parte de los artistas, investigadores, docentes y alumnos vinculados a la multimedia que desean explorar estas nuevas posibilidades.
En el ámbito de la multimedia y la hypermedia están apareciendo nuevos tipos de interfaces, otras formas de comunicar a los sistemas y los usuarios, con mejores posibilidades expresivas e inmersivas. Antes de discutirlas, definiremos el concepto de interface:
"...En primer lugar existe un usuario o agente social, que desea efectivamente cumplir una acción. En segundo lugar se encuentra una tarea que él mismo quiere ejecutar ... En tercer lugar existe un utensilio o un artefacto del que necesita el agente para llevar a término la acción ... Y aquí aparece la cuestión de cómo se pueden conectar, hasta formar una unidad, a tres elementos tan heterogéneos: el cuerpo humano, el objetivo de una acción, un artefacto o una información en el ámbito de la acción comunicativa. La conexión entre estos tres campos se produce a través de una interface. Se debe tener en cuenta que la interface no es un objeto, sino un espacio en el que se articula la interacción entre el cuerpo humano, la herramienta (artefacto, entendido como objeto o como artefacto comunicativo) y objeto de la acción. ...la interface vuelve accesible el carácter instrumental de los objetos y el contenido comunicativo de la información. Transforma los objetos en productos; transforma la simple existencia física (Vorhandenheit) en el sentido de Heidegger, en disponibilidad (Zuhandenheit). ... " (Bonsiepe, 1999, pág.17).
Definiremos como entornos virtuales a los sistemas informáticos del tipo multimedia (es decir que utilizan múltiples medios en forma mutuamente subordinada y poseen interactividad) y que mediante el uso de interfaces no convencionales (es decir que trascienden al teclado, el mouse y el monitor) logran establecer metáforas del tipo ambiente (por ejemplo la realidad virtual) y con gran capacidad de inmersión.
En el curso se propone estudiar las nuevas interfaces para el control de sonido e imagen en tiempo real, es decir el desarrollo de interfaces que trascienden a las tradicionales (teclado, mouse, monitor), particularmente aquellas que nos permiten captar presencia, movimiento y gesto de personas y que, en función de estos, nos permiten controlar la información de salida (sonido e imagen) con el fin de crear eventos artísticos con un alto nivel de participación e inmersión por parte del espectador.
Tanto el análisis de obras; el estudio de las nuevas interfaces, su diseño, programación e implementación; las herramientas de software y hardware a estudiar, apuntan a una formación integral del alumno en el manejo de dichas herramientas expresivas.
El curso propone abordar la problemática de la creación de Instalaciones y Performance desde la perspectiva de los sistemas de Interacción Humano-Computadora (HCI) (con nuevos tipos de Interfaces) desde sus aspectos teóricos, técnicos y de lenguaje. En función de este abordaje se plantea las siguientes temas que irán avanzando en forma progresiva y paralela:
Docentes a cargo:
Ambos docentes pertenecen al departamento de Producción Multimedial de la Facultad de Bellas Artes de la Universidad de La Plata e integran el grupo Proyecto Biopus , grupo que investiga (a través de la producción) la relación entre el espectador (usuario, navegador) y la obra y la fusión entre arte y tecnología.
El Grupo Proyecto Biopus realizó presentaciones en La Plata y Buenos Aires, de videos de animación experimental , video arte interactivo, instalaciones, etc. También han dado cursos y conferencias y obtenido premios por sus obras.
Perteneció al grupo de música contemporánea "Sonoridades Alternativas" (con más de 80 conciertos) y fundó el grupo de arte multimedia "Proyecto Biopus". Realizó obras de net-art, arte genético, música experimental, video-arte de animación experimental, instalaciones interactivas, con presentaciones en el MACLA, el Centro Cultural Recoleta, MALBA y Teatro Colón, entre otros.
Programa:
Modulo I: Ejecución y Procesamiento de Imagen en Tiempo Real, Construcción de Sensores, MIDI.
Contenidos:
Trabajo Práctico 1: Disparar 3 imágenes fijas o 3 loops de video en Arkaos con el teclado de la computadora
Contenidos:
Trabajo Práctico 2: Construir sensores de pisado y adaptar el TP1 para ser utilizado con los sensores construidos
Contenidos:
Trabajo Práctico 3: Aplicar 3 efectos en Arkaos a la entrada de video de una webcam mediante el uso de sensores de pisado.
Modulo II: Procesamiento de información, Ejecución y Procesamiento de Audio en tiempo real
Contenidos:
Trabajo Práctico 4: Disparar 3 imágenes en Arkaos en forma aleatore con un sensor
Contenidos:
Trabajo Práctico 5:
Disparar 3 sonidos en Max-MSP con 3 sensoresContenidos:
Trabajo Práctico 6:
Controlar la envolvente y pitch del sonido con los sensoresModulo III: Integración y conexión de software vía MIDI, Captación y generación de gesto para el control de imagen y sonido
Contenidos:
Trabajo Práctico 7: Disparar imagen y sonido con los sensores de presión controlando volumen y opacidad.
Contenidos:
Trabajo Práctico 8: Modificar la velocidad (pitch) del sonido con el mouse y al mismo tiempo modificar la imagen.
Trabajo Práctico 9: Disparar imágenes con sensores y controlar el nivel de efecto con el micrófono.
Trabajo Práctico 10: Controlar efectos sobre el sonido en función del micrófono y el mouse
Modulo IV: Captura de Movimiento y gesto expresivo
Contenidos:
Trabajo Práctico 11:
Captura de movimiento con la cámara web y control de sonido y video (Max y Arkaos)
Bibliografía: