Dpt. verwandelte Berührung in den Prompt für generative KI – jetzt im SFMOMA und in Cleveland

Kein Kundenbriefing: Hugues Bruyère, Chief Innovation Officer von Dpt., wollte sehen, wie sich generative KI als taktiles, responsives Medium verhält.

Eine Kamera beobachtet Papier, Ton und Ihre Hände; eine Image-to-Image-Diffusionspipeline malt sie live neu – Berührung ist der Prompt.

Papier, Ton und Alltagsgegenstände, vor einer Kamera angeordnet, speisen eine SDXL-Turbo-Image-to-Image-Pipeline; jede Geste liefert eine sofortige visuelle Antwort. Aus der Forschung wurden Art Morph im Cleveland Museum of Art und The Latent Space im SFMOMA.

Art Morph lässt Besucher in Cleveland Stoffe und Objekte in Kunstwerke aus der Open-Access-Sammlung des Museums verwandeln; The Latent Space (November 2025) war eine Live-Performance im SFMOMA mit dem Fotografen Alejandro Cartagena zu Wohneigentum und Verzerrungen in Trainingsdaten.

Dpt., ein Studio für Erlebnisdesign, betreibt Hands-on Hallucinations, ein offenes F&E-Projekt unter Leitung von Chief Innovation Officer Hugues Bruyère. Statt generative KI mit Worten zu prompten, ordnete er Papier, Ton und Objekte vor einer Kamera an, die mit einer SDXL-Turbo-Image-to-Image-Pipeline verbunden war: Jede Geste erzeugte eine sofortige visuelle Antwort und machte das Modell zu einem haptischen, responsiven Medium statt zu einem Text-Prompt-Werkzeug.

Aus der Erkundung wurde Art Morph im Cleveland Museum of Art: In der neu gestalteten ArtLens-Galerie – 21 neue Erlebnisse, die das Museum mit Design I/O entwickelte, wobei Dpt. an zwei Installationen mitwirkte – legen Besucher Stoff, Papier oder Objekte auf eine Plattform und sehen zu, wie die KI sie in Echtzeit in Kunstwerke verwandelt, inspiriert von der Open-Access-Sammlung des Museums. Die Materialien werden regelmäßig erneuert, damit die Installation sich weiterentwickelt.

Der zweite Ableger, The Latent Space (November 2025), wurde live im SFMOMA projiziert: Bruyère arbeitete mit dem mexikanischen Fotografen Alejandro Cartagena an der Frage „Wie sieht es aus, von einem Zuhause zu träumen?“, trainierte eigene LoRAs auf Cartagenas Fotografien von Häusern und Vororten, während Besucher Objekte in die Hand nahmen, die die Bilder steuerten – eine Arbeit über Repräsentationsverzerrungen in Trainingsdaten und das Ideal des Wohneigentums im heutigen Mexiko.

Es ersetzte den Text-Prompt durch Geste und Material und ließ das Modell wie ein physisches Medium reagieren

Die Museumsanwendungen entstanden im Nachhinein, als Produkte bewusster offener Forschung

Art Morph bindet seine Ergebnisse an die eigenen Open-Access-Bilder des Museums, sodass das Spielen sammlungsbasiert bleibt

The Latent Space nutzte dieselbe Grundlage, um Verzerrungen in Trainingsdaten zu hinterfragen, statt nur zu unterhalten

Offene F&E ohne konkrete Anwendung im Blick kann die Strategie sein – dieselbe Erkundung wurde zu zwei sehr unterschiedlichen Museumsaufträgen.

Dpt. zufolge wird Hands-on Hallucinations fortgesetzt, mit neuen Modellen, Interaktionen und Ausgabeformaten; das Studio sieht die beiden Museumsprojekte als Beleg dafür, dass zieloffene F&E Wissen und Werkzeuge bereithält, wenn die richtige Institution kommt.