公开(公告)号：CN116543769B

公开(公告)日：2023-12-29

申请号：CN202310675367.2

申请日：2023-06-08

Applicant: 清华大学

Inventor： 秦志金 ,  陶晓明

IPC: G10L15/26 ,  G10L25/30 ,  H04B7/0413

Abstract: 本公开提供了一种基于语义感知网络的MIMO语音传输方法和系统，涉及通信技术领域，旨在解决传统通信忽略语义信息的问题。所述方法应用于基于语义感知网络的MIMO语音传输系统，所述基于语义感知网络的MIMO语音传输系统包括发送端、多进多出信道和接收端，发送端包括语义编码器和信道编码器，接收端包括信道解码器和特征解码器；所述方法包括：将待传输语音输入语义编码器，得到待传输语音的多个语义特征；将多个语义特征输入信道编码器，得到每个语义特征映射成的复数向量；利用多进多出信道，将多个复数向量传输至接收端；将多个复数向量输入信道解码器，得到多个文字语义特征；将多个文字语义特征输入特征解码器，得到重建

公开(公告)号：CN116527833A

公开(公告)日：2023-08-01

申请号：CN202310801627.6

申请日：2023-07-03

Applicant: 清华大学 ,  南通先进通信技术研究院有限公司

Inventor： 秦志金 ,  王丽婷 ,  杨定熹 ,  陶晓明 ,  段一平 ,  刘帅

IPC: H04N7/01 ,  G06T3/40

Abstract: 本发明涉及视频处理技术领域，提供了一种基于超分模型的高清视频生成方法及系统，包括：获取高清关键帧和低分辨率视频流，进行特征提取并输入至超分模型；通过网格传播的方式对提取的特征进行传播，将参考帧特征进行光流扭曲后传播至中心帧；通过光流引导的可变形卷积方法将参考帧与中心进行对齐；在参考帧与中心帧对齐后进行特征拼接，经过连续的多个残差块完成特征融合；基于融合后的特征通过注意力过滤器获取最终的特征映射，通过像素洗牌层进行上采样从而得到重建的高清帧，输出高清视频。本发明解决了现有高清视频生成质量差、速度慢的问题。