公开(公告)号：CN117176936A

公开(公告)日：2023-12-05

申请号：CN202311235666.0

申请日：2023-09-22

Applicant: 南京大学

Inventor： 李希才 ,  季明江 ,  王元庆

IPC: H04N13/302 ,  H04N13/32 ,  H04N13/383 ,  H04N13/106

Abstract: 本发明提出了一种可自由拓展的立体数字沙盘系统和光场渲染方法，其中系统包括数据编码模块、数据解码模块、人眼跟踪模块、人机交互模块、光场图像渲染模块、驱动模块及显示模块。一方面通过准直背光调控技术和光学微结构阵列实现高密度显示屏的无缝拼接，从而使得数字沙盘的显示尺寸可自由拓展。另一方面配合人眼跟踪技术，在神经辐射场三维静态场景渲染的基础上，配合传统图形渲染管线技术，进一步实现静态与动态场景的融合，使得隐式表达与显示表达的3D场景可在统一框架中实时渲染与展示，同时通过仅在人眼观看位置进行数据渲染有效降低了图像渲染数据量。综合以上两方面的技术，观察者在任何视角都可以获得较好的裸眼立体沉浸感。

公开(公告)号：CN117176936B

公开(公告)日：2025-03-11

申请号：CN202311235666.0

申请日：2023-09-22

Applicant: 南京大学

Inventor： 李希才 ,  季明江 ,  王元庆

IPC: H04N13/302 ,  H04N13/32 ,  H04N13/383 ,  H04N13/106

Abstract: 本发明提出了一种可自由拓展的立体数字沙盘系统和光场渲染方法，其中系统包括数据编码模块、数据解码模块、人眼跟踪模块、人机交互模块、光场图像渲染模块、驱动模块及显示模块。一方面通过准直背光调控技术和光学微结构阵列实现高密度显示屏的无缝拼接，从而使得数字沙盘的显示尺寸可自由拓展。另一方面配合人眼跟踪技术，在神经辐射场三维静态场景渲染的基础上，配合传统图形渲染管线技术，进一步实现静态与动态场景的融合，使得隐式表达与显示表达的3D场景可在统一框架中实时渲染与展示，同时通过仅在人眼观看位置进行数据渲染有效降低了图像渲染数据量。综合以上两方面的技术，观察者在任何视角都可以获得较好的裸眼立体沉浸感。

公开(公告)号：CN117319631A

公开(公告)日：2023-12-29

申请号：CN202311235605.4

申请日：2023-09-22

Applicant: 南京大学

Inventor： 李希才 ,  季明江 ,  王元庆

IPC: H04N13/398 ,  H04N13/383 ,  H04N13/368 ,  H04N13/106

Abstract: 本申请公开了一种基于人眼跟踪的光场显示系统及图像渲染方法，由于对观看者的双眼位置进行定位与跟踪，并计算出光场重建所需的实时视角、方位等基础信息，从而通过神经辐射场体渲染算法完成光场图像的实时渲染。结合人眼跟踪技术与神经辐射场渲染技术，使得光场显示器的空间带宽积得到大幅提高，并支持多人同时观看，不但降低了光场显示器对液晶面板高像素密度的设计依赖，而且提高了光场显示器的立体显示效果，使得观看者在不同观看位置处都可以获得较好的立体沉浸感。另外采用所提出的神经辐射场对光场图像进行重建，有效避免了深度反转的问题，同时还可以减少光场图像渲染算法的数据量和计算复杂度。