Patch Notes: Vicky Clarke
musica concreta se encuentra con el aprendizaje automático en esta actuación de AURA MACHINE del artista sonoro de Manchester, filmada en 180 Studios.
La carrera de Vicky Clarke en el arte sonoro comenzó hace seis años cuando la artista de Manchester renunció a su trabajo para comenzar un curso básico de arte. “Siempre he estado obsesionado con el sonido, jugar con las grabaciones de campo, tocar instrumentos, pero todavía no había encontrado lo mío”, dice Clarke. “Tener tiempo y espacio para trabajar con materiales, crear esculturas sonoras y pensar en la percepción del sonido en el espacio fue fantástico. Luego, Clarke cofundó Noise Orchestra, un proyecto colaborativo basado en la electrónica de bricolaje que se ha convertido en residencias en eventos como STEIM, CTM y Q02, realizando talleres y luego instalaciones de sonido y caminatas.
«Siento que ahora encuentro mi voz en términos de interpretación y trabajo en solitario», dice Clarke. “Tiendo a hacer muchos experimentos sobre enfoques o tecnologías particulares a través de la investigación, como mi proyecto MATERIALITY, que crea sistemas performativos para la escultura sonora y la electrónica, y ahora mi residencia artística actual AURA MACHINE explora la música concreta y el aprendizaje automático en los que pienso mucho más. sobre la interacción hombre-máquina y cómo colaboramos con estos instrumentos para llegar a diferentes estados y materialidades sonoras”.
Las principales inspiraciones de Clarke son la música concreta y la cultura campeona, así como los artistas sonoros rusos de la década de 1920 y la estética constructivista y la teoría del arte. «Estoy infinitamente fascinado por el poder transformador del uso de máquinas electrónicas para manipular el sonido en nuevas formas y significados», dice Clarke. “En este momento estoy leyendo más sobre filosofía técnica y pensando en cómo nuestra construcción de la realidad está definida y mediada por nuestras máquinas. Para mí, que trabajo con grabaciones de campo y tecnología, me encanta la capacidad de descubrir sonidos y fuerzas que no podemos ver ni escuchar, salir de nuestras creencias y aprovechar las imágenes eléctricas».
Para este episodio de Patch Notes, invitamos a Clarke a 180 Studios para una presentación especial de su proyecto AURA MACHINE, acompañada de imágenes de su colaborador Sean Clarke.
“Esta pieza comenzó como una pieza AV en línea de 10 minutos para Future Music # 3 de PRiSM en el Royal Northern College of Music el verano pasado”, explica. “He trabajado con Sean Clarke desde entonces para desarrollar el trabajo como una actuación AV en vivo con el desafío de cómo actuar e improvisar con materiales de aprendizaje automático, de ahí la nueva incursión en la modularidad. Empecé con Make Noise Morphagene y está creciendo lentamente a partir de ahí. Pretendo desarrollarlo como un sistema de actuación para la escultura sonora: inteligencia artificial y electrónica”.
AURA MACHINE, que forma parte de la residencia artística de Clarke con NOVARS, Universidad de Manchester, lleva al oyente a un viaje a través de lo que sucede con el objeto sonoro cuando es procesado por una red neuronal. En la pieza, Clarke interpreta objetos en vivo, incluida su AURA Sculpture # 1 STEEL, un objeto transmutacional resonante generado por IA (que representa el objeto de sonido en el espacio latente) y un bong de vidrio.
«Me interesé en el potencial de la síntesis neuronal para generar nuevos materiales de sonido en bruto y quería explorar estos sistemas trabajando con mis grabaciones y esculturas», dice Clarke. “Estaba interesado en lo que los modelos detectarían y predecirían a partir de los datos de sonido, dónde radica la autonomía del artista y cómo sonaban estos materiales neuronales. ¿Podría la síntesis neuronal ser una nueva herramienta para la música concreta? Y lo que significa para el muestreo y la composición, tanto como fuente de sonido como colaborador.
“Creé un conjunto de datos de entrenamiento musical concreto, un collage de fragmentos de sonido de 90 minutos, y utilicé el modelo PRiSMSampleRNN para practicar estos datos, trabajando en asociación con PRiSM en RNCM. Estaba escuchando «mezclas» y formas únicas, esa transmutación de la materia de un estado a otro, una alquimia antes desconocida.
“Al trabajar con síntesis neuronal, se trabaja con una gran cantidad de material de salida muestreado: mantuve el material de ML de salida bastante crudo porque quería mostrar la verdadera materialidad de los sonidos del modelo neuronal. Algunos sonidos son bastante débiles, la experiencia de escuchar y producir con este material puede ser un desafío ya que los sonidos de salida fueron 16K, con muchos picos, eventos erráticos y arquitecturas locas. Adopté la estética lo-fi para mostrar el verdadero estado de estos nuevos materiales y ver si una máquina podía generar su propia voz o aura auténtica».
Las imágenes originales de AURA MACHINE provienen de fotografías de las fábricas de Manchester, de la retroalimentación de la cámara web realizada con Hydra (una plataforma para la codificación de imágenes en tiempo real en la red) y de los íconos de AURA MACHINE. “Quería crear un sistema gráfico simbólico o un lenguaje visual abstracto para que la pieza explorara la dimensionalidad y el objeto sonoro en el espacio latente”, dice. «Estaba fascinado por estas formas que están presentes tanto en las imágenes como en las esculturas físicas de sonido dentro del conjunto».
«Quería crear una narración visual que reflejara el proceso de Vicky, creando una experiencia inmersiva que trazara el viaje del algoritmo de transformación de sonidos», dice Sean Clarke sobre las imágenes. “Usando el contenido simbólico creado por la IA, pude crear una variedad de escenas interactivas que transportaban al espectador del mundo material al mundo virtual.
“Para lograr esto, exploramos el uso de transmisiones de cámaras en vivo, imágenes generativas / sensibles al audio y la aplicación de sistemas de nubes de puntos. Usando una plantilla de una forma de IA, pude crear un modelo 3D dentro de Blender. Usando Touchdesigner, fue posible convertir el modelo en una nube de puntos animable, que se muestra en las penúltimas etapas de la actuación. Todo el espectáculo se controló en vivo a través de Touchdesinger, lo que me permitió actuar junto a Vicky en tiempo real y aplicar parches sensibles al audio que impulsan los gráficos generativos».
El proyecto AURA MACHINE de Vicky Clarke continúa durante 2022 con una escultura final actualmente en construcción. Clarke también está desarrollando un proyecto de educación musical para mujeres jóvenes sobre IA sónica accesible que trabaja con Brighter Sound. Planea lanzar música de este proyecto de investigación a finales de este año. «Mi EP debut, Sleepstates, se autoeditará este verano de 2022 junto con una obra de net art que lo acompaña», dice Clarke.
Para obtener más información sobre Vicky Clarke, visite su sitio web y encuéntrela en Instagram. Conoce más sobre el trabajo audiovisual de Sean Clarke en su sitio web.
Mira más tarde: Notas del parche: Qasim Naqvi