公开(公告)号：CN114743078B

公开(公告)日：2025-01-21

申请号：CN202210213372.7

申请日：2022-03-04

Applicant: 北京大学

Inventor： 黄铁军 ,  张燚钧 ,  余肇飞

IPC: G06V10/80 ,  G06V10/40 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明公开了一种生物神经信号的视觉解码方法、装置、存储介质及终端，方法包括：获取双光子钙成像信号的数据阵列；将双光子钙成像信号的数据阵列输入预先训练的V1视觉皮层视觉信息神经解码模型中；其中，V1视觉皮层视觉信息神经解码模型是由神经信号转换模块和自动编码模块构成的；自动编码模块包含跳层结构，跳层结构用于在不同深度的神经网络层之间，融合整个神经网络在不同层上提取出来的特征；输出双光子钙成像信号对应的重构图像。由于本申请通过神经信号转换模块和自动编码模块进行信号数据处理，并通过自动编码模块中的跳层结构融合整个神经网络在不同层上提取出来的特征，从而提升了重构图像的精确度。

公开(公告)号：CN114743078A

公开(公告)日：2022-07-12

申请号：CN202210213372.7

申请日：2022-03-04

Applicant: 北京大学

Inventor： 黄铁军 ,  张燚钧 ,  余肇飞

IPC: G06V10/80 ,  G06K9/62 ,  G06V10/40 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种生物神经信号的视觉解码方法、装置、存储介质及终端，方法包括：获取双光子钙成像信号的数据阵列；将双光子钙成像信号的数据阵列输入预先训练的V1视觉皮层视觉信息神经解码模型中；其中，V1视觉皮层视觉信息神经解码模型是由神经信号转换模块和自动编码模块构成的；自动编码模块包含跳层结构，跳层结构用于在不同深度的神经网络层之间，融合整个神经网络在不同层上提取出来的特征；输出双光子钙成像信号对应的重构图像。由于本申请通过神经信号转换模块和自动编码模块进行信号数据处理，并通过自动编码模块中的跳层结构融合整个神经网络在不同层上提取出来的特征，从而提升了重构图像的精确度。