DEPT wollte Storytelling und generative KI verbinden, ohne eine geskriptete Demo zu schaffen. Der nützliche Testfall war kulturelle Vermittlung: Konnte ein historisches Porträt zu einem lebendigen Guide werden?

Ein Porträt als Schnittstelle behandeln: Rembrandts Bild Augen, Ohren, Stimme und ungeskriptete Antworten geben, damit Besucher mit dem Kunstwerk sprechen können.

DOGSTUDIO/DEPT baute aus KI-gestützter Sprach-, Bild- und Videogenerierung einen digitalen Klon und verband ihn mit einer Kamera, einem Mikrofon, einem eigenen Backend und einem LLM, sodass das Porträt Besucher wahrnehmen und in Echtzeit reagieren konnte.

Der Prototyp konnte Objekte und Kontext erkennen, etwa ein Geburtstagsabzeichen oder ein Buch, das ein Besucher hielt, und Webby verlieh Talking Portraits später drei Auszeichnungen für 2026 in KI- und immersiven Kategorien.

Talking Portraits begann mit einer Fantasie, die viele Besucher bereits kennen: Gemälde, die zurücksprechen können. DEPT und DOGSTUDIO wählten Rembrandts Selbstporträt als Apostel Paulus als erstes Motiv und verwandelten ein statisches Kunstwerk in eine KI-Figur, die ein Live-Gespräch führen konnte.

Der Aufbau vereinte mehrere Ebenen. Das Team erzeugte Material zum Trainieren eines digitalen Klons, ergänzte KI-Sprach-, Bild- und Videogenerierung und führte die Figur durch eine eigene Schnittstelle und ein Backend für Streaming, Warteschlangen, Leerlaufzustände und Echtzeit-Interaktion.

Das Porträt war nicht nur ein Chatbot mit Gesicht. Mit einer Kamera und einem Mikrofon verbunden, konnte es Besucher hören, Gesten oder Text sehen und den Austausch über ein LLM leiten, das für flüssige, ungeskriptete Gespräche trainiert war.

Das Ergebnis deutete eine neue Rolle für Museen und Schulen an: Vermittlung als Dialog. Die Webby Awards zeichneten Talking Portraits mit drei Auszeichnungen für 2026 aus, darunter AI Arts, Culture & Events und Best Real-Time Engagement.

Die Idee erklärt sich selbst, weil die Fantasie vom „sprechenden Gemälde“ kulturell bereits verständlich ist.

Computer Vision ließ den Austausch situiert statt generisch wirken.

Ein berühmtes historisches Porträt gab dem Prototyp genug Ausgangsmaterial und weckte die Neugier des Publikums.

Das Projekt rahmte KI als vermittelnde Schnittstelle ein, nicht nur als Inhaltsgenerator.

Neue Schnittstellen werden leichter verständlich, wenn sie eine vertraute kulturelle Fantasie aufgreifen; der technische Kniff zählt weniger als die Interaktion, die Menschen sofort begreifen.

DEPT beschrieb die gezeigte Version als Anfang und erklärte, eine zweite Version sei mit besserer Animationstreue, Gesprächsnuance und Realismus in Arbeit. Die Webby-Anerkennung positionierte den Prototyp anschließend sowohl als Fall für Kunst und Kultur als auch als Fall für Echtzeit-KI-Engagement.

DEN BELEGEN FOLGEN

Die Quellen

  1. From Rembrandt to real time: the AI-powered portrait that sees and speaks DEPT · dept.global
  2. Talking Portraits The Webby Awards · winners.webbyawards.com