一种基于事故报告的自动驾驶泛化性测试场景构建方法

    公开(公告)号:CN119358208A

    公开(公告)日:2025-01-24

    申请号:CN202411312862.8

    申请日:2024-09-15

    Applicant: 南京大学

    Abstract: 本发明涉及一种基于事故报告的自动驾驶泛化性测试场景构建方法。该技术根据基于层的场景定义,将事故场景初步抽象为三层:路网和交通引导对象、环境条件和动态对象。然后利用LLM系统地从事故报告中提取有关事故影响因素的信息,逐层组织信息。随后,对交通参与者的事故前驾驶行为建立约束,并使用约束求解器生成符合事故报告中指定约束的轨迹。接着,将提取的环境和道路信息生成的轨迹输入到驾驶模拟器中,重建车祸场景。最后,在评估阶段,将生成的模拟场景转换为包含测试预言机的测试用例,并将这些测试用例进行自动驾驶仿真测试。本发明目的在于解决在不同的道路上再现事故场景的难题,进而帮助自动驾驶系统从业人员在不同道路结构的事故场景下开展测试工作。

    一种基于测试日志分析与人机交互对话的测试复现引导的方法

    公开(公告)号:CN118916257A

    公开(公告)日:2024-11-08

    申请号:CN202310511954.8

    申请日:2023-05-08

    Applicant: 南京大学

    Abstract: 一种基于测试日志分析与人机交互对话的测试复现引导的方法,包括模型转换模块、监测模块、引导模块和对话机器人模块。模型转换模块从GUI截图中提取页面信息,根据结构与内容的整体相似度合并页面,按照测试的步骤顺序形成页面跳转模型。监测模块监测用户的复现操作并放入页面模型进行比对,若有偏离则调用引导模块,以一定的策略为用户纠偏。对话机器人模块包含与用户进行基本的互动沟通功能(如提醒用户偏离、询问用户是否需要帮助、询问是否成功复现),并可以在用户寻求帮助时,配合引导模块提示用户直到复现成功。

    一种基于大语言模型的移动众包测试报告聚合框架

    公开(公告)号:CN118885377A

    公开(公告)日:2024-11-01

    申请号:CN202410649782.5

    申请日:2024-05-18

    Applicant: 南京大学

    Abstract: 本发明涉及一种基于大语言模型的移动众包测试报告聚合框架。针对移动众包测试报告中文本简短且信息不足、未充分利用截图信息,以及重复报告聚合效率低下的问题,提出了基于大型语言模型的聚合框架。该框架细致地综合考虑了文本和截图信息,充分发挥了大型语言模型的语义理解能力,并通过最小生成树和聚类算法实现了高效的报告聚合。这种方法不仅提高了对测试报告的全面理解,还提升了审查效率和报告质量。具体而言,该方法利用大型语言模型深入理解自然语言,结合Paddle‑OCR和YOLOv5s模型提取截图中的文本和小组件信息,通过三元组提取和凝聚层次聚类实现更高效的审查。在聚合阶段,结合大型语言模型和TextRank算法,将报告表示为路径结构,并根据路径重叠频率和路径巧合度量评估报告的重要性,最终得到优先级排序的报告列表。本发明目的在于解决目前存在的移动众包测试报告数量巨大,针对报告文本内容不足截图内容丰富,提出了两种众包测试报告聚合技术,利用报告的图文信息并结合多模态、预训练模型等技术实现了报告的聚合,极大方便了专业人员对报告的处理。进而帮助软件研发人员提高测试报告审查效率,极大方便了专业人员对报告的处理,进而保障软件质量。

    一种基于噪音数据的机器学习模型鲁棒性评估方法

    公开(公告)号:CN110717602B

    公开(公告)日:2023-08-29

    申请号:CN201910952057.4

    申请日:2019-09-29

    Applicant: 南京大学

    Abstract: 本发明提供的是一种基于噪音数据的机器学习模型鲁棒性评估方法,包括原始数据集处理、噪音数据获取、模型训练、模型预测、准确率下降比计算和模型鲁棒性评估。原始数据集处理包括收集百分百标签正确的原始数据集,并采用10次10‑折交叉验证划分原始训练集和原始测试集。噪音数据获取包括在原始训练集的基础上,采用分层抽样方法抽取t′=|D|·α个数据,并将其标签替换为错误标签,其中α为噪音数据率。模型训练包括基于常见分类算法,并分别输入原始训练集和混有噪音数据的训练集分别构建原始模型和新模型。模型预测包括基于原始测试集,对这原始模型和新模型分别进行准确度评估。准确率下降比计算包括计算新模型较原始模型而言准确率下降的比率。模型鲁棒性评估包括横纵向比较准确率下降的比率的大小,衡量模型鲁棒性强弱,实现了判断模型健壮性的标准。

    一种基于差分测试和嵌入模型的知识图谱评估方法

    公开(公告)号:CN114579753A

    公开(公告)日:2022-06-03

    申请号:CN202210052086.7

    申请日:2022-01-17

    Applicant: 南京大学

    Abstract: 本发明涉及知识图谱质量评估领域,提供一种基于差分测试和嵌入模型的知识图谱评估方法。该方法基于变异测试的思想,变异生成可代表知识图谱数据中典型错误的三元组,并将其作为输入重训练出对知识图谱典型错误敏感的优化嵌入模型。该方法还基于差分测试的思想,输入普通知识图谱数据获取不同优化嵌入模型的输出,根据相似性评估保证输出的一致性和有效性;从而可通过符合相似性评估的输出结果再使用投票策略,最终计算出符合实际的质量评估指标。本发明目的在于解决目前存在的知识图谱质量评估人工成本高,耗时长且缺失自动化评估方法和过程的难题,进而帮助评估人员快速地对知识图谱质量进行了解并在短时间内获取可靠的知识图谱评估结果。

Patent Agency Ranking