纪录短片《Love, Rendered》聚焦结婚超过七十年的 Burt 与 Ethelle Shatz 夫妇,记录他们在 Burt 出现认知衰退后如何面对逐渐模糊的记忆。影片的核心场景是两人在克利夫兰一个学生合作社初次相遇的那一天——这段记忆从未被照片或影像记录,只存在于他们的脑海中。
该片由曾获奥斯卡提名的电影人 Liz Garbus 执导,Dan Cogan 与 Darren Aronofsky 参与制片,由 Google DeepMind 与 Aronofsky 旗下的创意机构 Primordial Soup 合作完成。
从临床观察到技术介入
导演 Liz Garbus 此前在拍摄纪录片《Coma》时曾观察到,处于最低意识状态的患者在听到熟悉的声音或看到亲人照片时,fMRI 扫描会出现活跃反应;Darren Aronofsky 则接触过一位患有阿尔茨海默症的前芭蕾舞者,她在听到《天鹅湖》后本能地在轮椅上跳出当年的编舞。这些经历促使创作团队关注“怀旧疗法”(reminiscence therapy)——通过歌曲、家庭故事和旧照片等感官线索刺激记忆、唤起对话并重建情感联结。
但当一段记忆缺乏任何物理线索时,团队决定尝试用 AI 技术填补空白。
图像修复与动作捕捉的两步工作流
据项目技术负责人介绍,重建过程采用了两步技术方案:
- 图像修复:使用生成式模型对 Burt 与 Ethelle 年轻时的黑白照片进行修复,为后续画面重建提供忠于人物外貌的基础素材。
- 姿态与表演控制:利用性能捕捉模型提取两人当下的微表情与习惯动作,包括 Burt 头部的特定倾斜角度、说话时的短暂停顿以及眼角的细微皱纹,并将这些特征映射到他们年轻时的形象上。
Ethelle 全程参与了创作过程,在现场纠正楼梯的弧度或鞋跟的形状等细节。团队表示,这种将过去与当下交织的方式生成了一段被当事人认为“真实”的记忆。
面向普通用户的照片修复功能
Google 在博文中提到,用户目前可以在 Gemini 应用中上传旧照片,并向 Gemini 发出指令:“Can you restore and colorize this photo? Preserve the appearance, expression, and pose of the people.”,以修复和上色老照片,同时保留人物的外观、表情与姿态。
