Sistemas interactivos basados en visión artificial para la instalación y performance

Laboratorio de Programación de C++ OpenFrameworks (nivel 3)

El deseo de depositar en las máquinas funciones físicas y cognitivas similares a las humanas puede rastrearse más allá de la edad media y verse aún hoy actualizado en las tecnologías de visión artificial, capaces de percibir, interpretar y digitalizar sujetos y objetos del mundo físico.

Este curso investiga de modo teórico y experimental el potencial creativo que ofrece la visión artificial para la creación de obras interactivas y la investigación en performatividad corporal en ambientes de realidad mixta.

Partiremos del estudio de la relación entre cuerpos, máquinas y performatividad, abarcando referentes en el pensamiento fenomenológico, materialista y posthumanista, de las ciencias cognitivas y la interacción humano-ordenador, y las nuevas concepciones filosóficas de lo natural y lo artificial, el ser, la presencia, la inmersión sensorial y los límites del cuerpo digital. Programaremos en lenguaje C++ usando openFrameworks orientados a desarrollar aplicaciones encargadas de adquirir y procesar datos de videocámaras y sensores tipo Kinect v1, v2 y Leap Motion, siendo capaces de detectar gestos faciales y movimientos corporales para el control de eventos audiovisuales en tiempo real.

Los participantes diseñarán experiencias interactivas que permitan la participación simultánea de varios usuarios interactuando con el sistema mediante gestos y movimientos del cuerpo de un modo transparente y natural. Construirán prototipos de sistemas interactivos formando grupos mixtos de programadores novatos y experimentados, diseñadores, teóricos y artistas performáticos, finalizando en una muestra interna y valoración de los resultados.

Dirigido a: Interesados en teatro, artes performáticas y escénicas, audiovisual en directo, instalación y diseño escenográfico, diseño de vestuario, música, publicidad, televisión. Desarrolladores de 3D, realidad virtual y aumentada. Investigadores en educación, psicología y ciencias cognitivas.

Objetivos:
– Estudio de la filosofía del cuerpo digital y la estética de la obra de arte interactiva.
– Capacidades para analizar estética y tecnológicamente sistemas interactivos complejos.
– Habilidades de programación con especialización en visión artificial utilizando el lenguaje C++ y OpenFrameworks.
– Diseñar y construir un prototipo de sistema interactivo controlado con gestos y movimientos del cuerpo en directo.

Requerimientos: El workshop está orientado a gente con poca o ninguna experiencia en programación C++ / openFrameworks.
Es recomendable asistir con ordenador personal a todas las sesiones.

Pre requisitos: No existen. No obstante es recomendable haber participado en: Arte del Código: Algoritmos, Inteligencia y Generatividad. Laboratorio de Programación de C++ OpenFrameworks (nivel 1).

Áreas de aplicación: Aplicaciones Comerciales y Automatismos Industriales. Artes Escénicas y Performáticas. Diseño escenográfico, creación audiovisual, vídeo para performances, televisión, conciertos en vivo, espectáculos públicos. Desarrolladores de 3D, realidad virtual y aumentada. Visualización de datos, publicidad, arquitectura, fotografía, diseño gráfico.

Sistemas interactivos basados en Visión artificial para la instalación y performance
Laboratorio de Programación de C++ OpenFrameworks (nivel 3)
Fechas: 3, 5, 7, 10, 12, 14, 17, 19, 21 de diciembre 2018
Horario: 18:30-21:30
Duración: 27 horas
Matrícula: 200 €

Programa:
– Estudios de la evolución en la relación entre cuerpo, máquinas y performatividad, recorriendo referencias históricas desde el siglo XV, la idea de la obra de arte total, la fenomenología y la cognición con el cuerpo, hasta los paradigmas actuales de realidad virtual, percepción artificial y sistemas inmersivos.

– Análisis de hitos filosóficos: desde Descartes, y De La Mettrie hasta Merleau-Ponty, Birringer, Virilio, Deleuze, Haraway, Papert.

– Arqueología de la visión computarizada y el aprendizaje automático de las máquinas (Machine Learning). Dispositivos, técnicas y algoritmos fundamentales, y sus principales áreas de utilización. Estudios sobre interactividad. Métodos de diseño de experiencia interactiva basados en el cuerpo y el espacio tecnológicamente aumentados.

–Análisis técnico de una instalación interactiva: dimensionamiento, disposición de luces, cámaras, sensores y sistemas audiovisuales. Visión general de software y hardware para capturar imágenes y para controlar múltiples proyectores sincronizados.

– Programación en C++ orientada a la visión artificial. Captura de imágenes, operaciones pixel a pixel y los principales algoritmos de análisis y predicción. Procesamiento avanzado de imágenes en tiempo real: detección de colores, movimiento, contornos, rostros, reconocimiento de patrones usando OpenCV de Intel.

– Métodos para adquirir y procesar datos de sensores Kinect V1, Kinect V2 y Leap Motion. Interpretación de datos, detección de usuarios, movimientos y contornos, esqueletos, mapas de profundidad. Scanning 3D de objetos y personas usando Kinect.

– Controlar sonidos, gráficos 3D, y shaders OpenGL en tiempo real mediante gestos y movimiento del cuerpo. Interacción con redes tipo mesh 2D/3D, estructuras de Voronoi, triangulación Delaunay, y con sistemas de partículas avanzados usando simulación de gravedad, fuerzas de atracción, repulsión, ondas, ecuaciones navier-stokes para fluidos 2d.

– Control Audiovisual mediante gestos y movimientos del cuerpo: secuencias de imágenes, reproducción y manipulación de películas y samples de audio. Aplicación de técnicas VJ/DJ, sampling y síntesis audio vídeo sincronizado al movimiento del cuerpo.

– Importar y exportar archivos XML, JSON, OBJ, STL. Instalaciones en red: Conexiones de red vía OSC Open Sound Control o MIDI, Syphon.

– Introducción a conceptos de redes neuronales artificiales y a técnicas de Machine Learning con usos interactivos o en tiempo real para interpretación de patrones, gestos faciales o movimientos del cuerpo entero y otros datos en tiempo real.

A cargo de:
LIBERTAR.IO / PROGRAMA DE ESTUDIOS EN FILOSOFÍA Y ARTES DIGITALES
http://www.libertar.io
Álvaro Pastor es arquitecto, artista electrónico, investigador en ciencias cognitivas y realidad virtual. MSc Sistemas Cognitivos y Medios Interactivos (Universidad Pompeu Fabra), desde 2006 es creador de entornos reales – virtuales y experiencias multi sensoriales. Colaborador en Art-ificial.org, SPECS Synthetic Perceptive Emotive Cognitive Systems Research Group @ Universidad Pompeu Fabra, 010.BIO VR/AR Arts Agency, Virtualsense.org. Desde 2014 dirige el Programa de Estudios en Filosofía y Artes Digitales en Hangar.org.

++

Categorias: Formación | Etiquetas:

Uso de cookies: Utilizamos cookies en este sitio web para mejorar su experiencia de usuario. Si continúa navegando está dando su consentimiento para la aceptación de las mencionadas cookies y la aceptación de nuestra política de cookies. ACEPTAR

Aviso de cookies