-
公开(公告)号：CN114092704B
公开(公告)日：2022-10-21
申请号：CN202111234242.3
申请日：2021-10-22
Applicant: 北京大数据先进技术研究院
Abstract: 本申请实施例涉及数据处理技术领域，具体涉及一种基于近邻传播的实例匹配方法、装置、设备及存储介质，旨在提高跨模态数据实例匹配的准确率。所述方法包括：接收不同模态的待匹配样本，对所述不同模态的待匹配样本进行特征提取，得到多个所述待匹配样本的特征；对于多个所述待匹配样本的特征中的每个待匹配样本的特征，确定所述待匹配样本的特征的多个同模态近邻特征；将所述待匹配样本的特征以及所述多个同模态近邻特征映射到跨模态空间中；在所述跨模态空间中，确定所述待匹配样本的特征以及所述多个同模态近邻特征的多个跨模态近邻特征；将所述多个跨模态近邻特征对应的样本作为所述待匹配样本的跨模态相似样本，输出匹配结果。
-
公开(公告)号：CN114022690A
公开(公告)日：2022-02-08
申请号：CN202111176314.3
申请日：2021-10-09
Applicant: 北京大数据先进技术研究院
Abstract: 本申请实施例涉及数据处理技术领域，具体涉及一种实例匹配方法、装置、设备及存储介质，旨在提高实例匹配任务的准确性。所述方法包括：将待匹配的文本和图像输入循环生成网络中；通过文本嵌入网络对文本进行特征提取，得到文本特征，并将文本特征输入文本图像生成网络中；通过文本图像生成网络生成语义图像；对语义图像、真实图像和与文本不匹配的错误图像进行判别，得到图像为真实图像的概率以及图像的条件概率；将语义图像、原图像和文本输入文本重建网络中，得到文本的条件概率，根据图像的条件概率以及文本的条件概率，输出匹配结果。
-
公开(公告)号：CN114092704A
公开(公告)日：2022-02-25
申请号：CN202111234242.3
申请日：2021-10-22
Applicant: 北京大数据先进技术研究院
Abstract: 本申请实施例涉及数据处理技术领域，具体涉及一种基于近邻传播的实例匹配方法、装置、设备及存储介质，旨在提高跨模态数据实例匹配的准确率。所述方法包括：接收不同模态的待匹配样本，对所述不同模态的待匹配样本进行特征提取，得到多个所述待匹配样本的特征；对于多个所述待匹配样本的特征中的每个待匹配样本的特征，确定所述待匹配样本的特征的多个同模态近邻特征；将所述待匹配样本的特征以及所述多个同模态近邻特征映射到跨模态空间中；在所述跨模态空间中，确定所述待匹配样本的特征以及所述多个同模态近邻特征的多个跨模态近邻特征；将所述多个跨模态近邻特征对应的样本作为所述待匹配样本的跨模态相似样本，输出匹配结果。
-
公开(公告)号：CN113408581A
公开(公告)日：2021-09-17
申请号：CN202110528389.7
申请日：2021-05-14
Applicant: 北京大数据先进技术研究院
Abstract: 本申请实施例涉及数据处理技术领域，具体涉及一种多模态数据匹配方法、装置、设备及存储介质,旨在实现低质量的跨模态数据的快速匹配。所述方法包括：将获取的多种单模态数据进行分类，得到多个数据集，其中，同一数据集中包括模态相同的多个单模态数据；对所述多个数据集中每个数据集的单模态数据进行特征提取，得到该数据集中多个所述单模态数据的高层特征，并将该数据集中的多个高层特征放入该数据集对应的特征数据集中；分别对每个所述特征数据集中的高层特征进行基于参考点的结构表征，得到所述特征数据集对应的参考表征；将多个特征数据集各自对应的参考表征输入预训练好的共同空间网络中，得到多组跨模态匹配的数据。
-
-
-
Search Results
4
records
(took 0.028 seconds)
