-
公开(公告)号：CN116310498A
公开(公告)日：2023-06-23
申请号：CN202310060451.3
申请日：2023-01-18
Applicant: 厦门市美亚柏科信息股份有限公司
IPC: G06V10/764 , G06V10/774 , G06V10/82 , G06N3/0464 , G06N3/047 , G06N3/084
Abstract: 本申请涉及一种基于动态采样的不平衡图片数据分类方法和装置，所述方法包括S1：手动创建不平衡图像数据；S2：对创建的不平衡图像数据进行归一化和独热编码，获得训练样本；S3：构建图片分类基础模型并冻结住模型；S4：利用f1‑score算法来动态的进行训练样本的采样；S5：解冻模型并利用f1‑score动态采样过的数据开始训练，然后根据混淆矩阵来输出损失结果和每个类型图像识别的准确率。本申请在训练过程之前会生成一个新的数据集来实现离线数据增强。生成的数据集足够大，可以保证有足够的样本在训练阶段对F1分数低的类进行重采样。与在线数据增强相比，离线数据增强具有易于阅读、方便后期实施调整以及生成可视化图像有助于控制增强图像等优点。
-
Patent Agency Ranking
公开(公告)号：CN114282591B
公开(公告)日：2024-09-27
申请号：CN202111369332.3
申请日：2021-11-18
Applicant: 厦门市美亚柏科信息股份有限公司
IPC: G06F18/241 , G06F21/62
Abstract: 本发明涉及一种动态安全级别实时划分方法、终端设备及存储介质，该方法中包括：S1：设定数据资源的分类维度和每个分类维度下包含的类别，根据每个数据资源在不同分类维度下的类别，设定静态安全级别，根据静态安全级别，构建静态安全级别映射表；S2：初始化设定脱敏下界L、脱敏周期T、脱敏速率k(.)和脱敏模式M；S3：当接收到数据资源后，从静态安全级别映射表中查找对应的静态安全级别x；S4：判断该数据资源是否处于开放状态，如果是，设定该数据资源的动态安全级别y为脱敏下界L；否则，进入S5；S5：根据实时获得的该数据资源经过的脱敏期，计算实时动态安全级别：本发明引入数据开放控制与数据脱敏控制，实现数据资源安全级别的实时可控。
-
公开(公告)号：CN117076559A
公开(公告)日：2023-11-17
申请号：CN202310875339.5
申请日：2023-07-17
Applicant: 厦门市美亚柏科信息股份有限公司
Abstract: 本发明提出了一种基于多计算引擎的大数据离线处理方法及其系统，该方法包括如下步骤：响应于第三方应用通过Web端发起的作业请求，所述作业请求调用引擎执行器控制层接口EECI；引擎作业提交执行器EJSR会轮询独立引擎作业队列，并取出作业信息JCI提交给离线计算引擎WebActor‑WSActor；启动离线计算引擎Actor‑SJEActor，发送启动信息至离线计算引擎WebActor‑WSActor实例；同时启动作业执行器JER，所述作业执行器JER不断轮询作业队列，查看作业队列中是否存在作业信息JCI，轮询到作业信息JCI时创建并提交所述作业信息JCI给作业执行者JERA，作业执行者JERA调用具体引擎进行处理。通过在实际建模过程中通过调用基于多计算引擎的大数据离线处理系统接口能够高效、可靠的解决大数据离线计算的业务场景。
-
公开(公告)号：CN116719616A
公开(公告)日：2023-09-08
申请号：CN202310332545.1
申请日：2023-03-31
Applicant: 厦门市美亚柏科信息股份有限公司
Abstract: 本申请涉及一种实时计算spark任务进程的方法、装置及存储介质，该方法从全局任务发起时开始监控，通过对正在执行的任务事件监听器进行优化，实时预测每个Job任务的用时，并在预测的基础上实时更新每个Job下的每个Task的具体用时，将Job的用时转化成百分比存储到分布式文件存储数据库进度表中，且每10s更新一下执行进度的百分比状态，前端通过调用分布式文件存储数据库表中的任务进度状态，实时展现任务的最新进度百分比，这将有利于对该任务整体计算进程的掌控，从而及时的做出相应的优化。
-
公开(公告)号：CN117076558A
公开(公告)日：2023-11-17
申请号：CN202310875305.6
申请日：2023-07-17
Applicant: 厦门市美亚柏科信息股份有限公司
Abstract: 本发明提出了一种基于多计算引擎的海量数据在线分析方法及其系统，包括：响应于第三方应用发起的作业请求，并将所述作业请求提交到web端在线引擎作业队列；引擎作业提交执行器EJSR轮询会话计算引擎作业队列，并取出作业信息JCI提交给会话计算引擎WebActor；启动会话计算引擎WebActor，接收到所述作业信息后，将作业执行条件JEC发布到远程消息队列MQT，Web服务启动后自动启动会话计算引擎Actor，并订阅远程消息队列主题MQT；同时启动作业执行器JER，所述作业执行器JER不断轮询作业队列，作业执行者JERA调用具体引擎进行处理。通过调用基于多计算引擎的海量数据在线分析接口不仅可以提高数据的处理效率、计算的可靠性，还可以提高系统的灵活性和可扩展性，也有利于降低系统维护成本。
-
公开(公告)号：CN114282591A
公开(公告)日：2022-04-05
申请号：CN202111369332.3
申请日：2021-11-18
Applicant: 厦门市美亚柏科信息股份有限公司
Abstract: 本发明涉及一种动态安全级别实时划分方法、终端设备及存储介质，该方法中包括：S1：设定数据资源的分类维度和每个分类维度下包含的类别，根据每个数据资源在不同分类维度下的类别，设定静态安全级别，根据静态安全级别，构建静态安全级别映射表；S2：初始化设定脱敏下界L、脱敏周期T、脱敏速率k(.)和脱敏模式M；S3：当接收到数据资源后，从静态安全级别映射表中查找对应的静态安全级别x；S4：判断该数据资源是否处于开放状态，如果是，设定该数据资源的动态安全级别y为脱敏下界L；否则，进入S5；S5：根据实时获得的该数据资源经过的脱敏期，计算实时动态安全级别：本发明引入数据开放控制与数据脱敏控制，实现数据资源安全级别的实时可控。
-
-
-
-
-
Search Results
6
records
(took 0.025 seconds)
