一种基于场景分层的光场渲染方法

    公开(公告)号:CN116503536B

    公开(公告)日:2024-04-05

    申请号:CN202310764527.0

    申请日:2023-06-27

    Abstract: 本发明涉及一种基于场景分层的光场渲染方法,以解决现有技术中对3D场景大深度部分进行较高分辨率渲染导致的算力浪费的问题。本发明包括:使用模型渲染工具进行实验获得三维光场显示中感知分辨率随光场显示深度的变化曲线;根据感知分辨率随光场显示深度的变化曲线,选定深度阈值,将场景划分为不同层级;对不同层级的3D场景进行渲染;确定不同层级间的遮挡关系,得到低分辨率的视差图像;对视差图像进行超分辨率重建与像素编码,得到高分辨率的合成图像。通过仿真实验获得理想状态下光场显示深度与人眼感知到的显示分辨率的变化关系,结合深度学习超分辨率方法提高合成图像的显示分辨率,从而实现高质量且算力损耗小的显示效果。

    光场显示分辨率的测量方法及装置

    公开(公告)号:CN117571259A

    公开(公告)日:2024-02-20

    申请号:CN202311421906.6

    申请日:2023-10-30

    Abstract: 本发明提供一种光场显示分辨率的测量方法及装置,其中方法包括:使用双目相机对三维光场显示器显示的棋盘格图像进行拍摄,得到拍摄图像,并基于所述拍摄图像确定所述棋盘格图像的显示深度;使用角点检测方法检测所述拍摄图像中的角点数量;基于所述显示深度、所述拍摄图像中的角点数量、所述棋盘格图像的角点数量,确定所述三维光场显示器在所述显示深度下的分辨率。从而可以在算力损耗小的条件下测量出三维光场显示器在不同深度下的显示分辨率。

    语音驱动数字人面部动画生成方法和装置

    公开(公告)号:CN116645456A

    公开(公告)日:2023-08-25

    申请号:CN202310390854.4

    申请日:2023-04-12

    Abstract: 本发明涉及人机交互技术领域,尤其涉及一种语音驱动数字人面部动画生成方法和装置。其中,语音驱动数字人面部动画生成方法包括,首先获取音频数据;对音频数据进行特征提取,得到对应的音频特征;然后将音频特征输入到训练好的面部关键点确定模型中,得到音频特征对应的面部关键点位置;面部关键点确定模型为根据音频特征和数字面部关键点位置的对应关系训练得到的;最后,根据面部关键点位置和数字人面部模板数据生成三维面部动画。可见,依据本发明提供的方法,可以采用音频数据对数字人面部进行驱动,避免了用户佩戴头戴式显示设备导致的身体疲劳的情况,同时使得数据人面部动作自然、切近真实人脸动作,使得人机交互效果更好。

    一种三维场景显示方法、系统、设备及介质

    公开(公告)号:CN119766980A

    公开(公告)日:2025-04-04

    申请号:CN202411832954.9

    申请日:2024-12-13

    Abstract: 本申请公开了一种三维场景显示方法、系统、设备及介质,涉及显示领域,该方法包括:根据三维场景中各区域与零平面的距离对三维场景进行分层,并对远距离层进行内容资源降冗余;基于各场景层与零平面的距离,分别对每个场景层进行稀疏视点采集,得到每个场景层的稀疏低分辨率视点图像;分别对每个场景层的稀疏低分辨率视点图像进行视点超分处理,得到每个场景层的稠密高分辨率视点图像;根据光场显示器的显示参数及多个场景层之间的前后位置关系,对稠密高分辨率视点图像进行编码与合成,得到稠密视点高分辨率光场编码图并显示在光场显示器上。本申请降低了数据量和计算资源的消耗,能够在大规模场景中实时生成高质量的三维视觉效果。

    显示还原光场空间还原能力的评价方法及相关设备

    公开(公告)号:CN118090152A

    公开(公告)日:2024-05-28

    申请号:CN202410021761.9

    申请日:2024-01-05

    Abstract: 本发明提供显示还原光场空间还原能力的评价方法及相关设备,方法包括:在光场显示器中单个像素对应的点中进行采样得到多个采样点,基于每个采样点向多个视点发射的光束的能量确定单视点图像中单个像素的像素能量集中视点,基于像素能量集中视点和单视点图像对应的视点位置确定单视点评价指标值;在光场空间范围内采样多个人眼位置,基于光场的光场参数确定每个人眼位置对应的能量集中视点序号差值;基于人眼位置分别对应的能量集中视点序号差值得到立体感知评价指标值;基于单视点评价指标值和立体感知评价指标值确定空间还原能力指标值,基于空间还原能力指标值确定光场的空间还原能力评价结果。本发明可以实现对光场空间还原能力的定量评价。

    一种基于场景分层的光场渲染方法

    公开(公告)号:CN116503536A

    公开(公告)日:2023-07-28

    申请号:CN202310764527.0

    申请日:2023-06-27

    Abstract: 本发明涉及一种基于场景分层的光场渲染方法,以解决现有技术中对3D场景大深度部分进行较高分辨率渲染导致的算力浪费的问题。本发明包括:使用模型渲染工具进行实验获得三维光场显示中感知分辨率随光场显示深度的变化曲线;根据感知分辨率随光场显示深度的变化曲线,选定深度阈值,将场景划分为不同层级;对不同层级的3D场景进行渲染;确定不同层级间的遮挡关系,得到低分辨率的视差图像;对视差图像进行超分辨率重建与像素编码,得到高分辨率的合成图像。通过仿真实验获得理想状态下光场显示深度与人眼感知到的显示分辨率的变化关系,结合深度学习超分辨率方法提高合成图像的显示分辨率,从而实现高质量且算力损耗小的显示效果。

Patent Agency Ranking