公开(公告)号：CN119848029A

公开(公告)日：2025-04-18

申请号：CN202311813147.8

申请日：2023-12-26

Applicant: 华为云计算技术有限公司

Inventor： 陈肇强 ,  郝诗源 ,  魏子恒 ,  李贵笃 ,  邓水发

IPC: G06F16/215 ,  G06F16/22 ,  G06F16/28 ,  G06N20/00

Abstract: 本申请提供重复记录检测方法、装置及计算机可读存储介质，其中，方法步骤为获取记录对，然后将记录对输入第一重复记录检测模型，得到第一预测信息(包括第一重复记录检测模型预测记录对中的两个记录重复或者不重复的概率)，在基于第一预测信息可确定记录对中的两个记录是否重复时输出确定结果，在基于第一预测信息不能确定记录对中的两个记录是否重复时，将记录对输入精度高于第一重复记录检测模型的第二重复记录检测模型，得到第二预测信息(包括第二重复记录检测模型预测记录对中的两个记录重复或者不重复的概率)，基于第二预测信息确定记录对中的两个记录是否重复并输出确定结果。该方法可实现重复记录检测，并保证检测精度以及节省成本。