Hadoop集群用户资源监控方法和系统

    公开(公告)号:CN109815008A

    公开(公告)日:2019-05-28

    申请号:CN201811573182.6

    申请日:2018-12-21

    Abstract: 本公开涉及一种Hadoop集群用户资源监控方法和系统,其中,所述方法包括:从Hadoop集群的主、备节点采集用户的作业日志信息;从用户的作业日志信息中按照设定的数据参数提取出对应的有用数据;以及根据统计参数统计所述有用数据,得到与其对应的统计数据。本公开能够实时监控集群内每个用户的资源使用情况,使集群管理者能够准确掌握每个用户对资源的使用情况,并根据用户对资源的使用情况,更加合理地为用户分配可利用资源,从而能够更加合理地调整集群资源,为集群是否需要扩容及如何扩容提供依据。

    标签认证装置、物资管理装置及物资管理方法

    公开(公告)号:CN106919963A

    公开(公告)日:2017-07-04

    申请号:CN201510994190.8

    申请日:2015-12-25

    Inventor: 邵波 杨硕

    Abstract: 本发明涉及通信领域,公开了一种标签认证装置、物资管理装置及物资管理方法,所述标签认证装置包括标签、读写器以及服务器;所述标签对所述读写器进行认证,响应于对所述读写器的认证成功所述标签将标签认证数据发送至所述读写器;所述读写器对所述服务器进行认证,响应于对所述服务器的认证成功将所述标签认证数据以及读写器认证数据发送至服务器;所述服务器根据读写器认证数据以及所述标签认证数据对所述读写器及所述标签进行认证。从而能够有效防止伪造读写器的事件,加强了标签数据的安全性,提高了标签数据管理的可靠性并提高了认证效率。

    跨平台税务智能客服语料迁移方法及装置

    公开(公告)号:CN112418875B

    公开(公告)日:2024-03-26

    申请号:CN202011131586.7

    申请日:2020-10-21

    Abstract: 本发明公开了跨平台税务智能客服语料迁移方法及装置。该方法包括:利用预先构建的目标平台的语料模型,对原有平台的源语料库去重,得到标准问题及相似问题;从原有平台的源语料库中,分别提取与各标准问题对应的答案;照语料模型对应的样式模板组织各标准问题对应的格式数据,得到适用于目标平台的目标语料库;将适用于目标平台的目标语料库迁移到目标平台,以使得目标平台利用目标语料库生成智能客服用知识库。该方法可以快速、准确地将智能客服原有平台的语料库迁移到智能客服的目标平台中,完成语料跨平台迁移,满足了智能客服系统对语料的精确搜索,逐步提升了纳税人对客户服务的满意度。

    数据编目构建方法、装置、电子设备和存储介质

    公开(公告)号:CN117389951A

    公开(公告)日:2024-01-12

    申请号:CN202311412005.0

    申请日:2023-10-27

    Abstract: 本申请提供了一种数据编目构建方法、装置、电子设备和存储介质,所述方法包括:获取数据资产目录,所述数据资产目录包括第一数据的第一数据资产目录。将所述第一数据和所述第一数据资产目录作为训练数据,训练多分类模型,其中,所述多分类模型用于构建输入数据的资产目录。将第二数据输入所述多分类模型,获得所述多分类模型输出的所述第二数据的推荐数据资产目录。接收基于所述推荐数据资产目录生成的第二数据资产目录。通过所述第二数据资产目录对所述数据资产目录进行更新。本方案可以提升数据编目构建时的工作效率。

    一种数据资产处理方法、装置及相关设备

    公开(公告)号:CN117271665A

    公开(公告)日:2023-12-22

    申请号:CN202311280307.7

    申请日:2023-09-28

    Abstract: 本申请提供了一种数据资产处理方法、装置及相关设备,通过构建基于MPP架构的列式存储数据库ClickHouse集群,对业务系统提交的数据资产进行分类存储和汇聚,创建对应所述列式存储数据库ClickHouse的ClickHouse分布式表,以对所述列式存储数据库ClickHouse集群的服务器节点上的物理表进行代理;结合所述ClickHouse分布式表,将所述列式存储数据库ClickHouse集群中由列式存储数据库ClickHouse原生提供的状态更改操作转化为对ClickHouse物理表的插入操作;基于转化后的列式存储数据库ClickHouse的分布式表引擎对所述数据资产进行实时分析和查询。克服了ClickHouse不支持更新数据的实时数据分析、原生ClickHouse直接使用Mutation操作性能弱问题,使Clickhouse具备高性能实时分析查询能力。

    一种标准问题推荐方法、装置、介质和设备

    公开(公告)号:CN114443942A

    公开(公告)日:2022-05-06

    申请号:CN202011214886.1

    申请日:2020-11-04

    Abstract: 本发明涉及一种标准问题推荐方法、装置、介质和设备。根据本发明实施例提供的方案,可以根据获取的指定用户历史曾经提问的每个标准问题对应的标准问题序列,利用预先训练出的将递归神经网络模型与线性模型进行融合获得的推荐模型,确定出针对指定用户的待推荐的标准问题的标识,进而将对应的标准问题推荐给指定用户。从而可以通过将递归神经网络模型与线性模型进行融合获得的推荐模型,对用户下一步可能提问的标准问题进行快速准确预测,实现标准问题的快速准确推荐。

    一种用于确定文本相似度的系统及方法

    公开(公告)号:CN114416975A

    公开(公告)日:2022-04-29

    申请号:CN202111572563.4

    申请日:2021-12-21

    Abstract: 本发明公开了一种用于确定文本相似度的系统及方法,属于数据处理技术领域。本发明系统,包括:聚类模块,获取用户的问答数据,并对所述问答数据进行预处理,针对预处理后的问答数据,选取所述预处理后的问答数据的初始化质心,根据所述初始化质心获取聚类的问答数据;文本相似度确定模块,对所述聚类结果中的问题数据进行分词,并计算每个分词的TF‑IDF值,根据所述TF‑IDF值计算所述聚类的问答数据间的Simhash值,根据所述Simhash值确定所述聚类的问答数据间的相似度。与现有技术相比,本发明通过计算关键词在问答语料中权重和simhash值比较两条问答数据相似性,成功的将聊天平台中非结构化数据转化成智能客服可识别的结构化数据。

Patent Agency Ranking