-
公开(公告)号:CN115905294A
公开(公告)日:2023-04-04
申请号:CN202211707942.4
申请日:2022-12-29
Applicant: 厦门市美亚柏科信息股份有限公司
IPC: G06F16/242 , G06F16/2455
Abstract: 公开了基于可视化动态构建Flink SQL的方法和系统,包括将算子划分为源端算子、处理算子和目标算子,从数据源栏拖取源端算子到画板并配置算子信息;基于处理业务,在算子栏选择多个处理算子到画板中,并对算子的处理顺序进行编排;目标端栏中拖取相应的目标端算子到画板并配置算子信息。本申请的方法和系统只需在平台中拖取相应算子即可自动同时生成多个不同的复杂度SQL语句,SQL的正确性和便捷性都得到了提升,加快了数据治理实施人员在数据接入处理的速度。
-
公开(公告)号:CN115758148A
公开(公告)日:2023-03-07
申请号:CN202211456763.8
申请日:2022-11-21
Applicant: 厦门市美亚柏科信息股份有限公司
IPC: G06F18/214 , G06F18/2431 , G06F18/2415 , G06N3/0985
Abstract: 本申请提出了一种利用单标签数据训练多标签模型的方法及装置,该方法包括以下步骤:S1、获取多标签数据集,多标签数据集包括初始正样本、初始负样本以及未标注样本;S2、基于混合模型判断未标注样本是否属于负样本,若属于则将未标注样本视为第一负样本,由第一负样本和初始负样本组成待训练负样本集;S3、基于二值交叉熵损失函数对初始正样本进行增强处理,获得待训练正样本集;以及S4、基于待训练负样本集和待训练正样本集训练神经网络模型,最终获得多标签模型。可以利用单标签数据集来完成多标签分类任务的训练,有效地节约了人工标记成本,在实际项目中可以实现多标签分类任务快速启动,也有利于下一步的模型优化。
-
公开(公告)号:CN112055087B
公开(公告)日:2023-04-07
申请号:CN202010947696.4
申请日:2020-09-10
Applicant: 厦门市美亚柏科信息股份有限公司
IPC: H04L67/303 , G06F9/50 , G06F9/445 , H04L67/10 , H04L41/0663
Abstract: 本发明给出了一种Mongodb集群快速部署、迁移和维护的方法及系统,包括对Mongodb的集群部署过程中的配置文件进行修改,将集群所有节点的IP地址与对应主机名的映射写入主节点的/etc/hosts配置文件中,并基于映射将其他节点的配置文件中的IP地址替换为对应主机名,降低了集群中所有节点之间对IP地址的耦合性,当某个节点需要迁移或维护时,只需要将该节点的实例停掉,将/etc/hosts配置文件中待迁移/维护的节点的IP地址替换为新节点的IP地址,最后在新节点上运行相应的Mongodb实例,从而实现Mongodb的快速部署、迁移和维护,同时使得各节点之间的IP地址不能通过Mongodb的集群相关命令看到,只能通过IP地址映射的配置文件查看。本发明解决了传统的Mongodb集群部署繁琐,迁移麻烦,维护不方便的问题。
-
公开(公告)号:CN115794986A
公开(公告)日:2023-03-14
申请号:CN202211615674.3
申请日:2022-12-15
Applicant: 厦门市美亚柏科信息股份有限公司
IPC: G06F16/31 , G06F40/279 , G06F40/268 , G06F16/35 , G06N3/048 , G06N3/08
Abstract: 本申请涉及一种基于特征继承的实体关系抽取方法,其包括:S1:对输入文本进行实体抽取,获得实体的有效特征,所述实体的有效特征包括实体、实体类型以及实体在原文本中的位置;S2:对输入文本进行词性分析,得到句子的词性结果;S3:根据获得的实体的有效特征和词性结果构建三元组特征;S4:将三元组特征输入关系分类网络中,并输出分类结果。本申请提出了一种基于特征继承的实体关系抽取方法,该方法将第一阶段的其他有效特征也传递到第二阶段,因为这些特征都准确率高,所以这样的特征会大大增强了第二阶段关系分类的效果。然后将这些特征通过带有注意力机制的网络层进行各类特征的权重学习,可以有效提升关系抽取效果。
-
公开(公告)号:CN112199377A
公开(公告)日:2021-01-08
申请号:CN202011292703.8
申请日:2020-11-18
Applicant: 厦门市美亚柏科信息股份有限公司
IPC: G06F16/22 , G06F16/21 , G06F16/2453
Abstract: 本发明提出了一种基于关系数据的移动终端伴随分析方法、装置及存储介质,该方法包括:在数据库中构建一数据表,所述数据表包括一个手机号码字段、多个轨迹字段和读个与轨迹字段相应的时间字段,所述数据表中的记录数为全量手机数,所述手机号码作为主字段;在到达一定触发条件时,获取产生流量数据的手机对应的轨迹点来更新相应时间字段的轨迹字段;基于所述数据表查找相同时间点对应的轨迹一致或类似的手机进行伴随分析得到分析结果。其可以利用少量的数据对于特定对象未知的多个手机进行时空轨迹伴随状态进行分析,可以避免耗时的聚类操作,使得工作流程更高效,还能够避免无用的数据冗余问题,提升查找效率。
-
公开(公告)号:CN115994027A
公开(公告)日:2023-04-21
申请号:CN202211407258.4
申请日:2022-11-10
Applicant: 厦门市美亚柏科信息股份有限公司
IPC: G06F9/50
Abstract: 本发明提出了一种计算资源动态调度的方法,该方法包括如下步骤:响应于资源分配和动态调节的两种算法,实现对每个任务的特性的自动分析,以及对资源调度引擎的自动匹配;底层的组件层响应于下达的资源调整指令并执行。通过优化不同引擎特征,结合任务规则库,以计算机程序自动构建了精细化的资源分配体系,进而形成针对不同类型任务的资源调度方案,满足各业务场景下的计算资源动态调度需求,解决大数据时代下,困扰已久的业务模型运行稳定性差的问题,实现了多任务融合调度模式,实时动态地调度各业务场景下的业务模型的运行资源需求,大大提高业务模型的运行稳定性,提高大数据对业务赋能的覆盖范围,而且降低大数据项目的建设成本。
-
公开(公告)号:CN112055087A
公开(公告)日:2020-12-08
申请号:CN202010947696.4
申请日:2020-09-10
Applicant: 厦门市美亚柏科信息股份有限公司
Abstract: 本发明给出了一种Mongodb集群快速部署、迁移和维护的方法及系统,包括对Mongodb的集群部署过程中的配置文件进行修改,将集群所有节点的IP地址与对应主机名的映射写入主节点的/etc/hosts配置文件中,并基于映射将其他节点的配置文件中的IP地址替换为对应主机名,降低了集群中所有节点之间对IP地址的耦合性,当某个节点需要迁移或维护时,只需要将该节点的实例停掉,将/etc/hosts配置文件中待迁移/维护的节点的IP地址替换为新节点的IP地址,最后在新节点上运行相应的Mongodb实例,从而实现Mongodb的快速部署、迁移和维护,同时使得各节点之间的IP地址不能通过Mongodb的集群相关命令看到,只能通过IP地址映射的配置文件查看。本发明解决了传统的Mongodb集群部署繁琐,迁移麻烦,维护不方便的问题。
-
公开(公告)号:CN111783570A
公开(公告)日:2020-10-16
申请号:CN202010551610.6
申请日:2020-06-16
Applicant: 厦门市美亚柏科信息股份有限公司
Abstract: 本发明提供了一种目标重识别的方法、装置、系统及计算机存储介质,所述方法包括:获取目标图像和待识别图像序列;将所述待识别图像序列和所述目标图像输入训练好的输入目标重识别模型,得到目标重识别结果;其中,所述目标重识别结果包括所述待识别图像序列中与所述目标图像属于同一目标的待识别图像,所述目标重识别模型包括多个阶段网络,至少一个所述阶段网络包括第一残差模块,所述第一残差模块包括自适应规范化层,所述自适应规范化层包括实例正则化层和批规范化层,所述实例正则化层和所述批规范化层的通道数之和为所述自适应规范化层的通道数。根据本发明的方法、装置、系统及计算机存储介质,通过对目标重识别网络中规范化层的改进,有效提升了目标重识别的识别性能及其域自适应学习能力。
-
-
-
-
-
-
-