Borrowed Limbs

An experimental short film produced with a custom-designed production pipeline for generative Machine Learning to mediate speculative concepts of disembodied intelligence

The experimental short film “Borrowed Limbs”, created in collaboration between the two designers Lisa-Marleen Mantel and Laura Juliane Wagner, emphasizes the mediating role speculative design has in the face of disruptive technological advancements, as it allows for the exploration and simulation of ethical issues. The short film is centered around an AI main character who uses the human body as a sensing device to gain a physical understanding of their surroundings. Influenced by posthuman thinkers, the work aims to provoke a discussion about Cartesian notions of disembodied intelligence.

The work combines recent developments in philosophy and cognitive science with state-of-the-art technologies and artistic practice: Main part of the film was produced with a machine-learning-backed process called “CLIP guided diffusion”. This method enables image synthesis based on language prompts. Prompts are carefully refined in a human-machine communication loop. In a way, the practical processes involved in producing the film reflect the speculative idea of an ongoing dialogue found in the narrative. The work was created as part of the Master Research at KISD – Cologne International School of Design (Faculty of TH Köln).

The process of producing the film is described in detail in form of a research paper.

SCREENINGS

Borrowed Limbs – An experimental short film produced with a custom-designed production pipeline for generative Machine Learning to mediate speculative concepts of disembodied intelligence

AUGUST 2022

ARS ELECTRONICA
as part of “Ars Electronica Animation Festival – Welcome to Planet B”

Kepler Gardens, Linz

NOVEMBER 2022

MUSEUMSNACHT KÖLN
as part of “States of motion”

Cologne

AUGUST 2022

CREATIVE CODING UTRECHT

Utrecht, the Netherlands

AUGUST 2022

KISD PARCOURS

Cologne

Designers in the silicon age proficiently mediate between the visceral and digital realms, when designing with and around technology. But how exactly do we reconcile disembodied technologies such as AI, with those aspects of the design profession that emphasize and often rely on tacit knowledge, gained through bodily multisensory experience and interaction? If AI, especially with the rise of Machine Learning heralds a shift from functional programming to systems being capable of performing tasks that are beyond mere automation, we could classify those systems as a new breed (Darling) – a new species. Following this train of thought raises the question of where will we designers place ourselves into the equation in order to proactively anticipate this new form of interspecies co-creation. How will we apply our tacit competencies in this novel union? In order to track down these answers, we will tie into the concurrent discourse around AI, AGI and embodiment that range from materialist skepticism, regarding ML systems as mere correlation machines, to technological saviorism and farther to esoteric techno-animism. We will also establish a rough conceptual understanding of applied ML by means of practical exploration, e.g. 2D to 3D (NERF), prompting LLMs and text-to-image synthetization). Disclaimer: coding skills are not a prerequisite but you shouldn’t be afraid of CMD-interfaces

Designer des digitalen Zeitalters vermitteln mit Expertise zwischen den viszeralen und den digitalen Sphären, wenn sie mit und um Technologie herum gestalten. Aber wie genau bringen wir körperlose Technologien wie KI mit jenen Aspekten des Designberufs in Einklang, die jenes implizite Wissen voraussetzen, welches durch körperliche, multisensorische Erfahrung und Interaktion gewonnen wird? Der Paradigmenwechsel von der funktionalen Programmierung hin zu Systemen, die über eine bloße Automatisierung hinausgehen und zu vollbringen scheinen wofür wir instinktiv ein verkörpertes Verständnis voraussetzen: Bild- und Musikkomposition, kreatives Schreiben etc.

Wie werden wir unsere technologieunabhängigen impliziten Kompetenzen im Zusammenspiel mit KI Technologie in Zukunft einsetzen? Auf der Suche nach Antworten auf diese Fragestellungen werden wir den aktuellen Diskurs beobachten, welcher von der Betrachtung von KI Systemen als bloße Korrelationsmaschinen zu Techno-Saviourismus bis hin zu esoterischem Techno-Animismus reicht.

Ein grobes konzeptuelles Verständnis der Technologien werden uns wir durch praktisches Experimentieren und kreativer Aneignung verschiedener ML Techniken (z.B. 2D zu 3D mit NERf und Text-zu-Bild mit CLIP guided diffusion) erarbeiten.

Disclaimer: Programmierkenntnisse werden nicht vorausgesetzt, technisches Interesse sollte aber vorhanden sein.

Mehrwert und Inhalte

Synthesizing Meaning Designerinnen des digitalen Zeitalters vermitteln mit Expertise zwischen den viszeralen und den digitalen Sphären, wenn sie mit und um Technologie herum gestalten. Sie bringen körperlose Technologien wie KI mit jenen Aspekten des Designberufs in Einklang, die jenes implizite Wissen voraussetzen, welches durch körperliche, multisensorische Erfahrung und Interaktion gewonnen wird. In diesem Seminar werden wir auf Basis von Ideen, posthumaner Denkerinnen (Harraway, Braidotti) alternative Zukunftsvisionen der Mensch-Maschine Interaktion entwickeln. Als Grundlage dienen ebenfalls Techniken, die in die Produktion des Films <a href=”https://vimeo.com/682432232“>Borrowed Limbs</a> geflossen sind und die den Teilnehmenden vermittelt werden. Durch praktisches Experimentieren und kreativer Aneignung von Text-zu-Bild mit CLIP-guided-diffusion suchen wir einerseits KI-Techniken, mit traditionellen Fertigkeiten von Designer*innen (z.B. Zeichnen, Animation, Fotografie) zu kombinieren und andererseits Zukunftsvisionen mit Hilfe spekulativer Designmethoden greifbar zu machen. Die Teilnehmenden werden ihre persönliche Zukunftsvision in Form eines ‘posthuman monster’ (Ribeiro) ausarbeiten und mit den genannten Methoden zum Leben erwecken. Disclaimer/Haftungsausschluss: Programmierkenntnisse werden nicht vorausgesetzt, ein technisches Interesse und die Bereitschaft, die Kommandozeile zu nutzen, sollte jedoch vorliegen.