Patent search ap:("支付宝(杭州)信息技术有限公司") AND inv:"石书玮" Page 1

1.

发明公开
图生视频模型的训练方法、装置、设备和存储介质审中-实审

公开(公告)号：CN119629426A

公开(公告)日：2025-03-14

申请号：CN202411746608.9

申请日：2024-11-29

Applicant: 支付宝(杭州)信息技术有限公司

Inventor： 龚镖 , 石书玮 , 郑丹丹 , 陈景东 , 杨铭

IPC: H04N21/472 , G06T7/20 , G06N20/00 , H04N21/44

Abstract: 本申请一个或多个实施例提供一种图生视频模型的训练方法、装置、设备和存储介质，所述方法包括：获取第一样本视频，并从所述第一样本视频中提取图像帧；获取由训练完成的运动估计模型针对所述第一样本视频进行运动强度评估，得到的所述第一样本视频的多种类型的运动强度数据；将所述图像帧和所述多种类型的运动强度数据输入预设的图生视频模型，由所述图生视频模型基于所述图像帧和所述多种类型的运动强度数据进行计算，生成对应的视频；基于生成的视频确定训练损失，并在根据所述损失完成针对所述图生视频模型的模型参数的调整后，确定完成针对所述图生视频模型的训练。

Patent Agency Ranking