Un proyecto inmersivo para experimentar un campo visual de alta dimensión

Datos de Poscatálogo

Idea, concepto y coordinación

Nuria Rodríguez Ortega.

Desarrollo VR

Opossum Studios y Leticia Crespillo Marí

Análisis computacional de imágenes

Javier de la Rosa

Edición y documentación

María Ortiz Tello. Vicerrectorado de Cultura (UMA) e iArtHIs_Lab, 2020

Producción

Universidad de Málaga y IArtHis_Lab / 2020

Proyectos relacionados

- Barr X Inception CNN
- ArtCatalog

Descripción

Análisis de imágenes mediante CNN Inception-UMAP-HBSCAN, realidad virtual e instalación inmersiva.

Lugar de presentación

Sala de exposiciones del Vicerrectorado de Cultura de la Universidad de Málaga.

Exposiciones

Catálogos desencadenados (17-12-2020, 29-01-2021). Sala de exposiciones del Vicerrectorado de Cultura de la Universidad de Málaga

Presentaciones

Congreso CIMED. I Congreso Internacional de Museos y Estrategias Digitales. UPV, 25 y 26 de marzo 2021.
- Foro Cities & Museums. Palacio de Ferias y Congresos de Málaga, 21-22 de junio de 2021

Premios

Premio CIMED 2021 a la mejor comunicación presentada en el congreso.

PUBLICACIÓN

Poscatálogo, o de cómo y por qué experimentar físicamente un espacio vectorial de alta dimensión

Aquí puedes acceder a la publicación derivada del congreso

Ver en DOI
Descarga el archivo en PDF

Barr X Inception CNN

Visita la web del proyecto
Visita el proyecto

ArtCatalog

Visita la web de artcatalog
Visita la web

Opossum Studios

Visita la web de Opossum Studios
Ir a Opossum

Descripción de la obra

La instalación inmersiva Postcatálogo, realizada ad hoc para la exposición Catálogos desencadenados organizada por el Vicerrectorado de Cultura de la Universidad de Málaga (17-12-2020, 29-01-2021), aborda tres objetivos.

1. En primer lugar, trata de responder a la cuestión de cómo hacer inteligibles para la cognición humana los espacios vectoriales de alta dimensión asociados al procesamiento computacional de imágenes más allá de la habitual aplicación de algoritmos de reducción de dimensionalidad.

2. En segundo lugar, se pregunta de qué modo la función ordenadora constitutiva de los catálogos tomará forma en una ecología medial donde la centralidad que hasta hace poco ocupaba el artefacto libro se está desplazando hacia nuevos contextos configurados por realidades mixtas (digital y no digital) que incluyen al sujeto como entidad activa en su ambivalente dimensión cognitivo-emocional-corporal.

3. En tercer lugar, y en la medida en que nos permite plantear problemáticas intelectuales complejas, este proyecto procura mostrar mediante un ejemplo concreto la potencial dimensión discursiva de la realidad virtual e inmersiva más allá de su empleo como recreación, reconstrucción o simulación de realidad.

El proyecto Poscatálogo es una evolución del proyecto precedente Barr X Inception CNN, proyecto experimental desarrollado con los estudiantes de posgrado del máster en Desarrollos Sociales de la Cultura Artística de la Universidad de Málaga durante la primavera de 2020. Barr X Inception CNN indaga en la nueva alteridad que confronta al ser humano del siglo XXI con un «otro» no humano –el otro maquínico-, tratando de establecer posibles espacios de negociación entre la cognición humana y la cognición artificial en el marco de lo que Katherine Hayles (2017) ha denominado «ensamblajes cognitivos».

Para materializar esta indagación, tomamos como punto de partida el conocido diagrama que Alfred H. Barr (primer director del MOMA de Nueva York) realizó en 1936 para la exposición Cubism and Abstract Art. En este diagrama, Alfred H. Barr instituyó uno de los paradigmas teóricos más influyentes de los discursos de la modernidad, al establecer una narrativa genealógica basada en influencias formales para explicar el devenir del campo del arte durante las primeras décadas del siglo XX en el marco de su concepción teleológica del arte.

A partir de este diagrama, la pregunta que nos planteamos fue la siguiente: ¿qué diferencias podrían existir entre las relaciones establecidas por Alfred H. Barr en su diagrama, donde se incluyen diversos ismos, poéticas y autores, y aquellas relaciones que podría establecer un dispositivo de IA que opera estrictamente a través de la computación matemática de datos visuales traducidos a números?

Para llevar a cabo este proyecto, transformamos este diagrama en un espacio de alta dimensión en el que las obras correspondientes a los ismos y poéticas presentes en el diagrama de Barr se distribuyen en clústeres según las similitudes visuales detectadas por una red neuronal convolucional Inception. De este modo, la distancia entre las imágenes, transformadas en vectores numéricos, es significativa de su mayor o menor grado de similitud visual, matemáticamente computada. El resultado de este primer experimento nos ha permitido reflexionar sobre las similitudes y diferencias existentes entre la visión humana –con sus capas de modelación cultural, disciplinar, epistemológica y subjetiva- y la visión artificial, que opera mediante modelos matemáticos y cálculo probabilístico.

En una segunda fase de esta indagación, nos propusimos reformular el espacio visual generado por las CCN Inception y el algoritmo de distribución UMAP en una instalación inmersiva habitable. La instalación inmersiva hace posible el que podamos deambular por el campo visual y experimentar físicamente los grados de similitud visual entre las imágenes recorriendo la distancia (matemática) establecida entre ellas.

En relación con sus objetivos de partida, Poscatálogo plantea tres posibles narrativas (no lineales), que pueden activarse (o no) cuando el sujeto se adentra en la instalación.

En primer lugar, en cuanto que reformulación y nueva interpretación del diagrama de Barr, el sujeto participante puede seleccionar algunas de los ismos y poéticas presentes en la representación diagramática y comprobar cómo quedan distribuidas sus obras en el espacio vectorial. De este modo, se hace patente las diferencias existentes entre la narrativa genealógica propuesta por Barr y el funcionamiento de la red neuronal Inception, la cual, al poner el acento en los procesos de proximidad y contigüidad visual (más allá de esquemas clasificatorios), contribuye a complejizar la configuración de la iconosfera artística al inscribir las imágenes en un ecosistema de relaciones múltiples y multidireccionales.

En segundo lugar, el participante puede seleccionar uno de los clústeres generados algorítmicamente y visitarlo. Dado que el espacio vectorial se ha transformado en un entorno habitable, transitable, experimentable corporal y físicamente, donde las distancias matemáticas se traducen en distancias físicas, el sujeto participante puede tomar conciencia de la relación gradativo-visual entre las imágenes de la iconosfera artística a medida que recorre el espacio. De este modo, el propio caminar del sujeto se convierte en un ejercicio semántico que produce sentido en el proceso de llevarse a cabo; es decir, una semántica performática, que se produce en tiempo real, dinámica y de manera subjetivada.

En tercer lugar, en una especie de suspensión de la lógica del pensamiento y actualización del libre juego de las facultades de Kant, el sujeto participante puede recrearse en la experiencia misma del habitar un campo de imágenes que se despliegan en torno a él a medida que camina, sin ninguna otra preocupación intelectual más allá del disfrute de la experiencia.

Finalmente, no puede obviarse que Poscatálogo es, en esencia también, un ejercicio curatorial de selección, disposición y exhibición de obras artísticas en forma de representaciones digitales realizado en co-creación con un dispositivo de inteligencia artificial. En consecuencia, Poscatálogo también plantea una reflexión sobre las nuevas modalidades de curadurías generativas, y sobre los procesos de co-creación y autoría distribuida propios de las prácticas creativas contemporáneas basadas en el uso de algoritmos y dispositivos de Inteligencia Artificial.

En definitiva, las experiencias inmersivas representan una oportunidad para plantear argumentos complejos que plantean desafíos intelectivos a la cognición humana. Más allá de las fórmulas basadas en el entretenimiento didáctico (o no didáctico) de los públicos, o de procesos de reconstrucción, recreación, simulación de realidad…, las instalaciones inmersivas pueden ser tratadas como territorios discursivos y espacios para la discusión crítica en los que el sujeto participante detenta una posición central.

Poscatálogo es una producción de iArtHis_Lab en colaboración con Opossum Studios para el Vicerrectorado de Cultura de la Universidad de Málaga.

Nuria Rodríguez Ortega

DESCARGA

la instalación y descúbrela

Aquí puedes acceder a Barr X Inception CNN, la instalación insitu, para que puedas ver cómo es. Debes descargar el archivo (453 MB), ejecutarlo y disfrutarlo con tus gafas de Realidad Virtual.

Descarga el archivo

Equipo del proyecto

Nuria Rodríguez

Idea, concepto y coordinación

José Gabriel Ruiz

Opossum Studios

Javier de la Rosa

Análisis computacional

Leticia Crespillo

Desarrollo VR

María Ortiz

Edición y documentación

Contacta con nosotros

¿Quieres contarnos o preguntarnos algo?

Rellena el formulario usando este enlace