公开(公告)号：CN115802943A

公开(公告)日：2023-03-14

申请号：CN202180043487.X

申请日：2021-04-06

Applicant: 微软技术许可有限责任公司

Inventor： D·J·麦克达夫 ,  J·埃尔南德斯·里维拉 ,  T·巴尔特鲁塞蒂斯 ,  E·W·伍德

IPC: A61B5/1455 ,  G06N3/02

Abstract: 提供了涉及生成包含生理逼真化身的视频序列的系统和方法。在示例中，针对化身的反照率被接收，与反照率相关联的次表面皮肤颜色基于与生理特性相关联的生理数据而被修改，以及化身基于反照率和经修改的次表面皮肤颜色而被渲染。然后，渲染的化身可以在视频的帧中被合成。在一些示例中，包含合成的化身的视频可被用于训练机器学习模型以检测生理特性。机器学习模型可以接收多个视频片段，其中视频片段中的一个或多个视频片段包含用生理特性生成的合成生理逼真化身。机器学习模型可以使用多个视频片段来训练。经训练的模型可以被提供给请求实体。

公开(公告)号：CN115702436A

公开(公告)日：2023-02-14

申请号：CN202180042553.1

申请日：2021-05-10

Applicant: 微软技术许可有限责任公司

Inventor： D·J·麦克达夫

IPC: G06T5/50 ,  G06T7/00 ,  G06N3/02

Abstract: 系统和方法涉及直接在化身和照片上动画化细微的生理过程。也就是说，可以对化身的外观进行基于生理的空间、颜色空间和时间修改，以模拟生理特性，诸如血流。更具体地，视频序列的帧和生理信号可以被接收。注意力掩码可以基于所接收的生理信号被生成，其中注意力掩码包括用于视频序列的帧的不同部分的、指示生理信号的强度的注意力权重。相应地，像素调整值可以基于生理信号和注意力掩码被生成，并且被应用于视频序列的帧中的被标识像素。