-
公开(公告)号：CN116737803A
公开(公告)日：2023-09-12
申请号：CN202311004734.2
申请日：2023-08-10
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F16/2458 , G06F3/0486 , G06F9/50 , G06F16/26
Abstract: 本发明提供了一种基于有向无环图的可视化数据挖掘编排方法。用户可以从预设的数据处理组件库中拖拽一个或多个组件到画布中，并建立连线关系形成有向无环图，并显示在界面上。用户设置组件的参数信息后，这些参数会自动加载到有向无环图中。流程编排完成后，生成数据传递到后台进行处理。在流程运行过程中，提供状态监控和日志查看功能。同时，有向无环图还具备版本管理的能力。本发明通过结合前端可视化技术和有向无环图的形式，解决了传统数据挖掘工具复杂、门槛高以及使用成本不断增加的问题。
-
公开(公告)号：CN116662373A
公开(公告)日：2023-08-29
申请号：CN202310926727.1
申请日：2023-07-27
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F16/242 , G06F8/41
Abstract: 本申请公开了一种数据访问控制方法、装置、设备及介质，数据访问控制方法包括：获取用于表征数据访问请求的初始SQL语句，对所述初始SQL语句进行解析，生成AST语法树；根据所述AST语法树确定所述初始SQL语句对应的数据访问请求方的访问规则，生成包含所述访问规则的目标SQL语句；执行所述目标SQL语句，以控制所述数据访问请求方按照所述访问规则进行数据访问操作；或使数据源执行所述目标SQL语句，以控制所述数据访问请求方按照所述访问规则进行数据访问操作。
-
公开(公告)号：CN110209701A
公开(公告)日：2019-09-06
申请号：CN201910495179.5
申请日：2019-06-10
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F16/2455 , G06F16/23
Abstract: 本发明涉及一种基于内存多级缓存的数据快速分页查询访问的方法,包括以下步骤：在数据库启动时，创建一张哈希表作为全局缓存结构；在事务开始时，创建一张哈希表作为该事务的局部缓存结构；在事务进行的过程中，完成表更新操作；当一个事务发起表的总行数查询时，以OID为键在全局缓存结构中查找表的总行数，以OID为键在事务局部缓存结构中查找当前事务影响该表的变化行数，两个数值相加作为此次查询表的总行数；在事务提交时，数据库系统将更新过的当前事务局部缓存结构中各个表的变化行数累加到全局缓存结构中相应表的总行数上。本发明设计合理，大大减少并发冲突，同时最大限度减少了内存中表的总行数的维护对表的更新性能产生的影响。
-
公开(公告)号：CN103198159A
公开(公告)日：2013-07-10
申请号：CN201310153332.9
申请日：2013-04-27
Applicant: 国家计算机网络与信息安全管理中心 , 天津神舟通用数据技术有限公司
Abstract: 本发明涉及一种基于事务重做的异构集群多副本一致性维护方法，其特点是：包括查询执行阶段：集群事务管理模块跟踪活动事务表，录制事务操作；集群为主数据节点生成事务重做日志；集群将事务重做日志文件发送给所有副本数据节点并管理节点状态；副本维护阶段：副本数据节点接收来自于主数据节点的事务重做日志文件；故障恢复阶段：数据库管理员将查找出故障节点对应的存档日志，将所有副本数据节点的数据恢复到同主数据节点一致的状态。本发明解决了现有技术存在代价高、性能差的问题，弥补了二进制日志传输方式无法支持异构数据库的不足，实现了多副本之间的快速一致性维护，保证无共享集群的高可用性，同时能够支持集群数据库节点的异构化。
-
公开(公告)号：CN116996505B
公开(公告)日：2023-12-15
申请号：CN202311252984.8
申请日：2023-09-27
Applicant: 天津神舟通用数据技术有限公司
IPC: H04L67/06 , H04L67/288 , H04L67/56 , H04L67/60
Abstract: 本发明提供一种基于调度引擎的文件交换控制方法和系统，包括：定义文件交换任务，向调度引擎中的API节点发送启动文件交换任务请求；调度引擎中的API节点收到任务请求后，生成启动任务的调度命令；调度引擎中的多个调度节点轮询调度命令；当某个调度节点捕获到调度命令后，对调度命令加上分布式锁，阻止其他调度节点获取；该调度节点选择一个执行节点，向该执行节点发送文件交换任务指令；执行节点接收到任务指令后，对任务信息进行解析，获取任务类型，以及任务指定的交换节点，向交换节点发送文件交换请求；交换节点对待交换的文件进行切片后，根据并发数设置，调用文件交换服务并发交换文件；服务端并发接收并存储文件。
-
Patent Agency Ranking
公开(公告)号：CN116996505A
公开(公告)日：2023-11-03
申请号：CN202311252984.8
申请日：2023-09-27
Applicant: 天津神舟通用数据技术有限公司
IPC: H04L67/06 , H04L67/288 , H04L67/56 , H04L67/60
Abstract: 本发明提供一种基于调度引擎的文件交换控制方法和系统，包括：定义文件交换任务，向调度引擎中的API节点发送启动文件交换任务请求；调度引擎中的API节点收到任务请求后，生成启动任务的调度命令；调度引擎中的多个调度节点轮询调度命令；当某个调度节点捕获到调度命令后，对调度命令加上分布式锁，阻止其他调度节点获取；该调度节点选择一个执行节点，向该执行节点发送文件交换任务指令；执行节点接收到任务指令后，对任务信息进行解析，获取任务类型，以及任务指定的交换节点，向交换节点发送文件交换请求；交换节点对待交换的文件进行切片后，根据并发数设置，调用文件交换服务并发交换文件；服务端并发接收并存储文件。
-
公开(公告)号：CN110533112A
公开(公告)日：2019-12-03
申请号：CN201910830182.8
申请日：2019-09-04
Applicant: 天津神舟通用数据技术有限公司
IPC: G06K9/62
Abstract: 本发明涉及一种车联网大数据跨域分析融合方法，其主要技术特点是：建立车联网云数据挖掘架构，该车联网云数据挖掘架构包括分布式数据访问引擎、并行挖掘引擎及代理节点和Web服务器集群；采用车联网数据挖掘算法进行数据挖掘；采用共享内存并行计算技术实现共享内存的并行功能。本发明采用由分布式数据访问引擎、并行挖掘引擎、Web服务器集群及代理节点构成的可支持并行计算的云数据挖掘架构，提高了面向海量数据的支撑能力；通过数据预处理技术、不确定数据预处理技术车联网行业数据处理与融合技术，优化流数据等车联网特有数据的支持；基于车联网流数据的挖掘、分析、聚类技术、行为识别、异常检测等新型数据挖掘算法，提升系统的智能化水平。
-
公开(公告)号：CN110222035A
公开(公告)日：2019-09-10
申请号：CN201910495162.X
申请日：2019-06-10
Applicant: 天津神舟通用数据技术有限公司
Abstract: 本发明涉及一种基于异或校验与日志恢复的数据库页面高效容错方法,包括以下步骤：计算数据页面对应的校验码并保存在数据页面的头部中；从存储介质中读取数据页面到内存中时，通过校验码判断数据页面是否损坏；在启动数据库进行实例恢复的过程中，则将数据损坏页面跳过以使数据库正常启动，启动后提醒用户在哪个数据库对象中出现了数据页面损坏；启动数据库成功之后，确定哪个表出现了页面损坏问题，用户通过专门的SQL来对该表的损坏页面进行处理。本发明设计合理，其在数据页面内存储数据页面的异或运算校验码用于实时检测页面是否出现损坏，可成功恢复已损坏的数据，减少用户的数据损失。
-
公开(公告)号：CN105335479B
公开(公告)日：2018-11-23
申请号：CN201510657159.5
申请日：2015-10-12
Applicant: 国家计算机网络与信息安全管理中心 , 天津神舟通用数据技术有限公司
IPC: G06F17/30
Abstract: 本发明涉及一种基于SQL的文本数据统计实现方法，其技术特点是：对输入SQL语法进行解析；在结构化数据仓库中建立和子查询投影结构一致的临时表；识别全文索引引擎数据分布规则；将基于SQL的简单子查询翻译为全文索引引擎语法，并在全文索引引擎中执行；获取全文索引查询结果并将结果导入到结构化数据仓库引擎临时表中；完成查询结果导入过程，向数据仓库下发重写后的基于临时表SQL查询语句，并向客户端返回查询结果。本发明结合全文索引引擎和结构化数据仓库引擎的特点，实现对海量文本数据的基于通用SQL语言的统计分析方法，解决了传统方法统计功能薄弱和结构化数据仓库无法支持高效文本检索的问题，大大提高了文本数据统计分析的易用性。
-
公开(公告)号：CN105302667B
公开(公告)日：2018-05-04
申请号：CN201510657187.7
申请日：2015-10-12
Applicant: 国家计算机网络与信息安全管理中心 , 天津神舟通用数据技术有限公司
Abstract: 本发明涉及一种基于集群架构的高可靠性数据备份与恢复方法，其技术特点是：包括在线数据备份与恢复方法和历史数据备份与恢复方法，所述在线数据备份与恢复方法包括：创建表空间并按时间划分范围分区表；在向数据库导入数据的过程中实现一个备份功能；将备份信息写入系统表；当天数据变成历史数据时将其按历史数据备份方式完成备份；当发生磁盘故障时，重新装载数据，实现在线数据的恢复。本发明对两类数据采用了不同的备份恢复方法，使得在发生介质故障时，提高了单数据库节点的高可用性、高可靠性，有效地解决了一般集群双机热备方案中无法有效恢复节点数据、互备节点同时发生介质故障时的数据丢失等问题。
-
-
-
-
-
-
-
-
-
Search Results
21
records
(took 0.025 seconds)
