公开(公告)号：CN118446309A

公开(公告)日：2024-08-06

申请号：CN202410432680.8

申请日：2024-04-11

Applicant: 复旦大学

Inventor： 张鹏 ,  程凯 ,  顾宁 ,  卢暾

IPC: G06N5/04 ,  G06Q10/0631 ,  G06F18/25 ,  G06V10/44 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明公开了一种无障碍群智协同标注中的多模态信息冗余推断方法；该方法包括：对无障碍标注中的图像、文本和地理位置信息进行数据清洗和匹配；对图像、文本和地理位置信息进行差异化特征提取，以最大化保留各种模态中的关键信息；通过地理特征补充图像特征和文本特征，促使图像特征和文本特征更好的完成对齐和融合；基于孪生网络提出配对标注的相似性推断方法，使得模型可以短时间内完成冗余标注的高质量推断。本发明可以大大提高无障碍标注的冗余推断的准确率和效率，解决通用空间众包中针对以地理位置信息为主导的标注任务的冗余推断问题，具有广阔的市场前景和商业化价值。