基于集成神经辐射场的人脸视频表情迁移模型构建方法及表情迁移方法和系统

    公开(公告)号:CN115409937A

    公开(公告)日:2022-11-29

    申请号:CN202210999247.3

    申请日:2022-08-19

    Abstract: 本发明属于人工智能技术领域,特别涉及一种基于集成神经辐射场的人脸视频表情迁移模型构建方法及表情迁移方法和系统,通过构建集成神经辐射场人脸表情迁移模型,其中,所述迁移模型中包含:集成渲染生成器,其由n个用于查询采样帧图像空间密度和颜色的子生成器组成;及用于对n个子生成器进行加权求和的权重控制器;根据人物类别收集视频数据,将视频数据分解为若干张帧图像,按时间顺序将若干张帧图像均分n份,利用均分的帧图像集构建样本数据,训练优化子生成器,以样本数据中的表情向量为权重控制器的输入,利用权重控制器调整子生成器的输出权重以获取最终训练优化后的迁移模型。本发明在面部重现的重建质量、身份保持、表情和姿态转换等方面都有更加稳定和优越的表现,具有较好的应用前景。

    基于邻域去偏的图对比学习方法及系统

    公开(公告)号:CN115423017A

    公开(公告)日:2022-12-02

    申请号:CN202211063188.5

    申请日:2022-08-31

    Abstract: 本发明属于图对比学习技术领域,特别涉及一种基于邻域去偏的图对比学习方法及系统,针对给定的图数据,利用不同图变换方式来获取对应图变换下的图视图;获取原始图中的节点特征向量,并根据节点特征向量对图视图中的所有节点进行聚类,通过将节点划分到对应的类别簇来获取节点的聚类类别;去除对比学习损失函数中每个节点负样本对中与该节点聚类结果相同且处于其m阶邻域的其他节点,减小了对比学习损失函数中的偏差。本发明通过不同图变换来构造样本数据,并在模型训练中通过去除对比学习中每个节点负样本对中与该节点聚类结果相同的节点,在增加少量计算量的条件下,能够大大减小负样本对的偏差,提高图对比学习模型的性能,便于下游任务中的应用。

Patent Agency Ranking