需要解决的问题
DEPT希望融合叙事与生成式AI,而不是做一个脚本化的演示。一个有用的测试案例是文化诠释:一幅历史肖像能否成为实时导览?
创意
将肖像视为界面:赋予伦勃朗的图像以眼睛、耳朵、声音和即兴回复,让访客能与艺术作品对话。
运作方式
DOGSTUDIO/DEPT利用AI辅助的语音、图像和视频生成构建了一个数字克隆,然后将其连接到摄像头、麦克风、自定义后端和LLM,使肖像能够感知访客并实时回应。
实际效果
该原型能够识别物体和情境,例如生日徽章或访客手持的书本,Webby后来在AI和沉浸式类别中为Talking Portraits颁发了三项2026年奖项。
背景
Talking Portraits始于一个许多访客早已熟悉的幻想:能够回话的画作。DEPT和DOGSTUDIO选择伦勃朗的《扮作使徒保罗的自画像》作为第一个对象,将一件静态艺术品转变为能够进行实时对话的AI角色。
该构建结合了多个层面。团队生成素材以训练数字克隆,加入AI语音、图像和视频生成,然后通过自定义界面和后端运行该角色,用于流媒体、队列、空闲状态和实时交互。
这幅肖像不仅仅是一个有脸的聊天机器人。连接到摄像头和麦克风后,它能够听到访客、看到手势或文字,并通过经过流畅即兴对话训练的LLM来路由交流。
这一结果暗示了博物馆和学校的新角色:将诠释作为对话。Webby Awards认可Talking Portraits,授予三项2026年奖项,包括AI艺术、文化与活动以及最佳实时互动。
为何奏效
这个想法不言自明,因为“会说话的画作”这一幻想在文化上已经易于理解。
计算机视觉让交流感觉置身情境之中,而非泛泛而谈。
一幅著名的历史肖像为原型提供了足够的素材和观众好奇心。
该项目将AI定位为诠释性界面,而不仅仅是内容生成器。
可借鉴之处
当新界面借用熟悉的文化幻想时,它们更容易被理解;技术技巧不如人们即刻理解的互动重要。
此后进展
DEPT将展示版本描述为一个开端,并表示第二版本正在开发中,具有更好的动画保真度、对话细微差别和真实感。Webby的认可随后将该原型定位为既是艺术与文化案例,也是实时AI互动案例。
从这里,追溯依据
参考来源
- From Rembrandt to real time: the AI-powered portrait that sees and speaks DEPT · dept.global
- Talking Portraits The Webby Awards · winners.webbyawards.com