一种优化维度组合的多维分析方法和系统

    公开(公告)号:CN114880343A

    公开(公告)日:2022-08-09

    申请号:CN202210483036.4

    申请日:2022-05-05

    Abstract: 本发明公开了一种优化维度组合的多维分析方法和系统,涉及多维数据分析技术领域。该优化维度组合的多维分析方法和系统,数据源模块支持导入Hive数据和Kafka消息队列,并对外提供Restful风格的接口方便调用;构建预处理cube模块时,提供可视化的客户端界面,用户可以自行选择维度、度量来构建符合自身需求;构建cube中提供了高级可选项,其中包含衍生维度的选择,聚合组的添加,必须维度的确定,层级制度及联合维度的设定;计算模块中提供MapReduce计算引擎和Spark计算引擎灵活处理不同情况。

    一种全流程支持拖拉拽的自动化分布式任务流调度系统

    公开(公告)号:CN114546348A

    公开(公告)日:2022-05-27

    申请号:CN202210251893.1

    申请日:2022-03-15

    Abstract: 本发明涉及调度系统技术领域,具体为一种全流程支持拖拉拽的自动化分布式任务流调度系统,包括GG‑editor绘图框架、Activiti工作流框架、Quartz分布式定时调度框架;其中,Activiti工作流框架和Quartz分布式定时调度框架实现自动化分布式任务流调度;所述Activiti工作流框架实现复杂业务场景的任务流自定义配置;所述Quartz分布式定时调度框架实现该任务流的分布式调度;所述GG‑editor绘图框架实现可视化拖拽,工作流流程图的设计。本发明通过Activiti框架和Quartz框架,适用于复杂业务场景工作流设计,可视化拖拽组件简单灵活,支持大批量数据采集,每天可支持TB级数据量采集,每天采集数据可达亿条,支持复杂的任务流调度,任务流调度响应时间 =95%。

    一种布式场景下的全密态分布式安全聚合计算方案

    公开(公告)号:CN119939649A

    公开(公告)日:2025-05-06

    申请号:CN202411928224.9

    申请日:2024-12-25

    Abstract: 本申请涉及一种布式场景下的全密态分布式安全聚合计算方案,包括:客户端,所述客户端通过数据传递连接可信主节点TM,所述可信主节点TM通过数据传递连接多个从节点#1,所述可信主节点TM包括REE和TEE,所述TEE内部包含查询引擎和全局索引,所述从节点#1由安全局部索引、TEE查询引擎和数据集,所述TEE查询引擎通过数据传递连接安全局部索引和数据集。本申请实施例提供的整体系统,系统能够在分布式环境中实现数据的安全聚合计算,同时保障计算请求的隐私性和完整性;多聚合算子的支持:研究提供安全的数据传输机制和加密聚合方案,确保不同聚合算子的计算过程不会泄露敏感信息,同时优化计算性能,减少需要参与计算的子节点。

    计算机的DTrans数据融合平台图形界面

    公开(公告)号:CN306368053S

    公开(公告)日:2021-03-09

    申请号:CN202030527246.0

    申请日:2020-09-08

    Abstract: 1.本外观设计产品的名称:计算机的DTrans数据融合平台图形界面。
    2.本外观设计产品的用途:用于数据及图形的展示。
    3.本外观设计产品的设计要点:在于图形用户界面的内容和排版布局界面。
    4.最能表明设计要点的图片或照片:界面变化状态图4。
    5.无设计要点,省略其他视图。
    6.图形用户界面的用途:主视图为“登录界面”,实现DTrans数据融合平台的用户登录,输入用户名、密码即可进入界面变化状态图1所示的“首页统计”页面,进行平台各类信息的数据概览,包括数据库连接数、运行错误数、执行资源剩余量、任务统计等;点击界面变化状态图1中的连接配置按钮,进入界面变化状态图2所示的“连接配置”页面,显示平台连接的数据库列表,可进行编辑、新建、删除操作,新建连接需填写数据库类型、IP、端口号等基本信息;点击界面变化状态图1中的接口配置按钮,进入界面变化状态图3所示的“接口配置”页面,显示平台连接的接口列表,可进行编辑、新建、删除操作,新建配置时需填写基本信息、web服务查询、字段配置等信息;点击界面变化状态图1中的创建任务按钮,进入界面变化状态图4所示的“创建任务”界面,作为最能表明本外观设计要点的图片,提供了任务编辑画布和任务组件,可通过拖拽式操作将顶部组件拖到中间画布,点击组件在画布右侧进行参数配置,最终保存为任务;保存后的任务出现在界面变化状态图5所示的“任务列表”页面,任务列表分为任务监控和历史任务两栏,可进行暂停、终止、重启、状态更新、编辑、查看日志、删除等操作;点击界面变化状态图1中的元数据管理按钮,进入界面变化状态图6所示的“元数据管理”页面,记录所有任务运行的元数据信息,支持血缘查看和元数据查看,可详细显示元数据的表数据、列数据和数据预览;点击界面变化状态图1中的数据接口按钮,进入界面变化状态图7所示的“数据接口”页面,显示接口的配置信息,可通过接口基本信息、数据格式、目标数据库、字段配置等信息录入,实现平台接口的创建;点击界面变化状态图1中的质量剖析按钮,进入界面变化状态图8所示的“质量剖析”页面,显示质量剖析任务列表,可进行运行、编辑、删除、查看日志报告、新建等操作,质量剖析任务运行完成后会生成界面变化状态图9所示的“质量剖析结果报表”,以图表的形式展示数据库各数据的健康情况;点击界面变化状态图1中的集群资源按钮,进入界面变化状态图10所示的“集群资源”页面,记录当前集群的内存、磁盘、CPU消耗情况;点击界面变化状态图1中的日志管理按钮,进入“日志管理”页面,点击日志管理下的系统运行日志按钮,进入界面变化状态图11所示的“系统运行日志”页面,显示任务运行日志和系统错误日志;点击日志管理下的用户操作日志按钮,进入界面变化状态图12所示的“用户操作日志”页面,记录用户在平台的操作日志;点击界面变化状态图1中的用户管理按钮,可进入“用户管理”页面,再点击用户管理下的用户权限按钮,可进入界面变化状态图13所示的“用户权限”页面,可以创建角色及设置角色权限;点击用户管理下的用户信息按钮,可进入界面变化状态图14所示的“用户信息”页面,可以新增用户。

Patent Agency Ranking