公开(公告)号：CN116208844A

公开(公告)日：2023-06-02

申请号：CN202310212242.6

申请日：2023-03-01

Applicant: 之江实验室

Inventor： 王习之 ,  黄治 ,  李萌坚 ,  耿卫东

IPC: H04N23/611 ,  H04N23/74 ,  H04N23/56 ,  H04N23/69 ,  H04N25/44

Abstract: 一种基于时序变化光场的轻量级动态人脸采集装置，其特征在于：包括相机阵列和时序可控的光场阵列，光场阵列为相机阵列提供照明；相机阵列与光场围绕正面人脸分布，俯视呈现的形状近似半圆，在垂直方向为多层分布。相机阵列、LED光源与控制模块连接，可以同步控制相机拍摄与光源开关，在人脸动态采集过程中，形成时序变化的光场。本发明还提供一种基于时序变化光场的轻量级动态人脸采集装置的采集方法。本发明通过多层LED光场阵列，设计了一套对皮肤漫反射分量均匀，对高光分量有差异的光照模式，实现对动态场景友好的时序变化光场，确保几何和人脸物理材质动态提取的效果。本装置以相对低的硬件成本做到高质量人脸几何和材质的重建。

公开(公告)号：CN116246006A

公开(公告)日：2023-06-09

申请号：CN202310212243.0

申请日：2023-03-01

Applicant: 之江实验室

Inventor： 王习之 ,  李萌坚 ,  刘逸颖 ,  黄治 ,  耿卫东

IPC: G06T15/50 ,  G06T17/00

Abstract: 基于轻量装置的时变光场的动态人脸高光材质提取算法，包括以下步骤：(1)根据开源的人脸皮肤反射参数统计数据库Merl/ETH Skin，人脸高光以Torrance‑Sparrow模型表达根据开源的人脸皮肤反射参数统计数据库Merl/ETH Skin，人脸高光以Torrance‑Sparrow模型表达；(2)将皮肤的Torrance‑Sparrow模型转为Rusinkiewicz Half‑vector参数化表达方式；(3)通过至少三个与不同Half‑vector的夹角解出法向；(4)获取法向后，再代入Torrance‑sparrow模型计算其高光的反射强度。本发明还提供基于轻量级设备的时序变化光场的动态人脸高光材质提取算法的装置。本发明充分利用人脸皮肤材质的反射模型的，提取的法向具有物理依据；不超过三个光照模式就能实现高光参数的提取，时间间隔少，适合人脸动态场景。