一种基于Spark的大规模数据流分析方法及系统

    公开(公告)号:CN113434548A

    公开(公告)日:2021-09-24

    申请号:CN202110711332.0

    申请日:2021-06-25

    Abstract: 本发明公开一种基于Spark的大规模数据流分析方法及系统,方法包括,基于Spark构建分布式计算框架,通过分布式计算框架对目标代码进行分布式数据流分析,其中,分布式数据流分析,包括,过程内预处理阶段,分布式过程间数据整合阶段;系统包括,数据采集模块,数据处理模块,数据分析模块,数据存储模块,数据显示模块;本发明采取两级并行策略,多入口地进行并行计算,具有高度的可扩展性,同时考虑了分布式计算的负载均衡问题,能够充分利用分布式集群算力优势,加速静态数据流分析。

    一种基于交叉验证的代码缺陷检测方法及装置

    公开(公告)号:CN108763092B

    公开(公告)日:2020-12-01

    申请号:CN201810553230.9

    申请日:2018-05-31

    Abstract: 本发明涉及一种基于交叉验证的代码缺陷检测方法及装置,选择多个代码缺陷检测工具,对被检测代码进行检测,生成第一检测结果;获取每个代码缺陷检测工具对与所述被检测代码相似的N个测试用例的准确率;根据所述准确率,对所述第一检测结果进行加权求和,生成第二检测结果;当所述第二检测结果大于预设阈值时,确定所述被检测代码存在缺陷。本发明提供的方法与现有的使用单个工具进行缺陷检测的方法相比,本发明基于被测代码与测试用例之间的相似性,并根据各个工具在已知测试用例上的准确率,对各个工具检测被测代码的测试结果进行综合计算和评判,具有较高的准确率,可以减少误报,提高代码缺陷检测和代码审核的工作效率。

    一种基于深度学习的代码缺陷检测方法及装置

    公开(公告)号:CN109408389A

    公开(公告)日:2019-03-01

    申请号:CN201811278355.1

    申请日:2018-10-30

    Abstract: 本发明涉及一种基于深度学习的代码缺陷检测方法及装置,选取多个代码缺陷检测工具,分别对被检测代码进行检测,相应生成多个检测结果;将所述被检测代码通过预设的转换方法,转换为所述被检测代码的特征向量;所述特征向量包括所述被检测代码的结构特征和语义特征;将所述特征向量分别输入多个所述代码缺陷检测工具各自相对应的评估模型,输出多个所述代码缺陷检测工具分别对所述被检测代码检测缺陷结果的置信度;并结合检测工具对被检测代码的检测结果,可以有效判定代码是否真实存在某种缺陷,能够解决现有代码缺陷检测中误报较高的问题,有效提升代码审查的工作效率。

    基于本体的代码片段标注与重用系统

    公开(公告)号:CN104881285A

    公开(公告)日:2015-09-02

    申请号:CN201510272310.3

    申请日:2015-05-25

    Abstract: 本发明涉及一种基于本体的代码片段标注与重用系统,适用于高效软件集成开发环境的构建。该系统包括代码片段本体标注模型,代码片段本体标注模块,本体标注模型学习模块,服务器端管理模块,客户端管理模块。其中,代码片段标注模型用于对新提交的代码片段进行自动标注;本体标注模型学习模块学习并生成代码片段本体标注模型;客户端管理模块完成代码片段的采集、提交、查询功能;服务器端管理模块负责用户管理,接收客户端提交的代码片段并存入数据库中;代码片段本体标注模块负责对代码进行标注和重用。本发明实现了代码片段在不同的程序设计人员之间,以及不同的代码片段管理系统之间的相互理解、相互操作和相互共享。

    一种片上网络路由器输出缓冲系统

    公开(公告)号:CN102821046B

    公开(公告)日:2015-05-06

    申请号:CN201210275130.7

    申请日:2012-08-03

    Abstract: 本发明涉及一种片上网络路由器输出缓冲系统,包括共享输出缓冲存储器、可用地址队列模块、与输出端口数对应的通道队列模块,设路由器有I个输入端口和J个输出端口,则路由器的每个输入端口通过消息数据线RDATA_i与存储器连接,每个输出端口通过消息数据线SDATA_j与存储器连接;可用地址队列模块与存储器、每个通道队列模块之间通过I条输入地址数据线RAddr_i连接;每个通道队列模块有一条输出地址数据线SAddr_j分别连接到存储器、可用地址队列模块。本发明将所有输出端口的缓冲资源整合到一起,统一由硬件动态分配管理,通过模块间的协同工作,实现了交叉开关的基本功能,改善了片上网络对拥塞的承受能力。

    一种基于Wi-Fi技术的手机通话系统

    公开(公告)号:CN102821485A

    公开(公告)日:2012-12-12

    申请号:CN201210274591.2

    申请日:2012-08-03

    Abstract: 本发明涉及一种基于Wi-Fi的手机通话系统,包括:计算机网络N、与计算机网络N已经建立连接关系的Wi-Fi网络W、通过有线或无线方式与计算机网络N连接的计算机C、通过自身携带的Wi-Fi设备与Wi-Fi网络连接的N个手机M1-MN,在计算机C上运行有通话软件SC,在每个手机上运行有通话软件SM。本发明能够降低手机与手机之间的通话成本;支持群组管理和群组通话;采用分层采样和分层量化技术实现了网络带宽自适应,能够适用于带宽较小的计算机网络和Wi-Fi网络。

    一种片上网络路由器输出缓冲系统

    公开(公告)号:CN102821046A

    公开(公告)日:2012-12-12

    申请号:CN201210275130.7

    申请日:2012-08-03

    Abstract: 本发明涉及一种片上网络路由器输出缓冲系统,包括共享输出缓冲存储器、可用地址队列模块、与输出端口数对应的通道队列模块,设路由器有I个输入端口和J个输出端口,则路由器的每个输入端口通过消息数据线RDATA_i与存储器连接,每个输出端口通过消息数据线SDATA_j与存储器连接;可用地址队列模块与存储器、每个通道队列模块之间通过I条输入地址数据线RAddr_i连接;每个通道队列模块有一条输出地址数据线SAddr_j分别连接到存储器、可用地址队列模块。本发明将所有输出端口的缓冲资源整合到一起,统一由硬件动态分配管理,通过模块间的协同工作,实现了交叉开关的基本功能,改善了片上网络对拥塞的承受能力。

Patent Agency Ranking