-
公开(公告)号：CN102323946A
公开(公告)日：2012-01-18
申请号：CN201110259524.9
申请日：2011-09-05
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F17/30
Abstract: 一种并行数据库中算子复用的实现方法，包括如下步骤：步骤1、使用普通的查询规划方法为查询生成串行的查询计划，所述查询计划是一个二叉树结构；步骤2、自顶向下扫描执行所述查询计划，寻找可复用的物化类算子，并更改查询计划结构，将线程级物化算子改为全局复用的物化算子；步骤3、对步骤2生成的更改后的查询计划进行并行化处理，生成用于多个线程并行执行的计划森林；步骤4、对步骤3生成的计划森林进行全局复用算子合并处理，生成用于可供多个线程并行执行且可复用物化算子的有向图计划；步骤5、各个线程并行执行所述有向图中的各自的计划部分，第一个执行到全局复用算子的线程称之为主线程，由主线程锁住该全局复用算子并真正执行该算子及其以下的计划，其他线程等待；步骤6、所述主线程执行完该算子之后解锁，其他线程开始从该全局复用算子中读取数据并继续各自的计划树；步骤7、所述主线程等待所有的计划都读取完毕全局复用算子的数据之后释放该算子物化的数据。
-
公开(公告)号：CN117131069B
公开(公告)日：2023-12-22
申请号：CN202311398767.X
申请日：2023-10-26
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F16/242 , G06F16/22 , G06F16/2455
Abstract: 本发明公开一种数据库单表分组扫描方法，包括：步骤S1：在SQL语句中提供分组数量和当前要获取的分组序号；步骤S2：启动分组扫描begin阶段，得到当前页面；步骤S3：启动分组扫描next阶段，从分组扫描获取PFS页面；步骤S4：分组扫描返回有效PFS页面则执行步骤S6，否则执行步骤S5；步骤S5：分组扫描已经结束，结束堆扫描；步骤S6：当前PFS页面是否存在下一个有效范围，是则继续，否则执行步骤S3；步骤S7获取有效范围，解析8个页面上的所有行，并将所有行放到待发送缓冲区；步骤S8将缓冲区中的数据发送给前端，并回到步骤S6。本发明对表中数据进行跳跃式分组访问为并行获取数据库单表数据提供支撑。
-
公开(公告)号：CN117149885A
公开(公告)日：2023-12-01
申请号：CN202311422024.1
申请日：2023-10-31
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F16/25 , G06F16/23 , G06F16/242 , G06F16/2458 , G06F16/27
Abstract: 本发明公开了一种基于数据库主节点转发的读写分离实现方法，包括：步骤1：数据库主节点接收应用程序发送过来的SQL语句；步骤2：对SQL语句进行语法解析和语义分析，获得SQL语句类型以及操作的对象ID；步骤3：判断SQL语句是否为只读操作；步骤4：如果是，将SQL语句发送到从节点执行，等待接收到从节点执行结果后返回客户端；否则，直接在主节点执行SQL语句，将执行结果返回客户端；步骤5：如果不是，在主节点执行SQL语句；记录SQL语句更新的所有对象的ID；事务提交时，将本事务更新过的所有对象ID对应的LSN设置为本事务的提交LSN，供后续只读语句执行到步骤4时使用。因此主数据库可以专注于处理写操作，从而提高了写操作的性能和响应时间。
-
公开(公告)号：CN117131069A
公开(公告)日：2023-11-28
申请号：CN202311398767.X
申请日：2023-10-26
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F16/242 , G06F16/22 , G06F16/2455
Abstract: 本发明公开一种数据库单表分组扫描方法，包括：步骤S1：在SQL语句中提供分组数量和当前要获取的分组序号；步骤S2：启动分组扫描begin阶段，得到当前页面；步骤S3：启动分组扫描next阶段，从分组扫描获取PFS页面；步骤S4：分组扫描返回有效PFS页面则执行步骤S6，否则执行步骤S5；步骤S5：分组扫描已经结束，结束堆扫描；步骤S6：当前PFS页面是否存在下一个有效范围，是则继续，否则执行步骤S3；步骤S7获取有效范围，解析8个页面上的所有行，并将所有行放到待发送缓冲区；步骤S8将缓冲区中的数据发送给前端，并回到步骤S6。本发明对表中数据进行跳跃式分组访问为并行获取数据库单表数据提供支撑。
-
公开(公告)号：CN102004799B
公开(公告)日：2012-10-03
申请号：CN201010609540.1
申请日：2010-12-28
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F17/30
Abstract: 本发明涉及一种数据库冗余数据一致性检验方法，包括如下步骤：数据库主服务器接收到用户操作请求后确认相关备份服务器；数据库主服务器将用户操作请求发送至备份服务器列表中的各备份服务器；各备份服务器执行用户操作请求得到操作结果；各备份服务器计算操作结果的语义校验码；各备份服务器将操作结果和相应的语义校验码发送到校验服务器；校验服务器对操作结果和语义校验码后进行校验并将操作结果或错误信息发送给数据库主服务器；数据库主服务器将接收到的操作结果或错误信息转发给用户。本发明克服了物理层检验方法的局限性，能直接针对执行结果进行检验，有效地降低了需要进行检验操作的数据量，也降低小了检验操作的系统资源消耗。
-
Patent Agency Ranking
公开(公告)号：CN102033938B
公开(公告)日：2012-06-06
申请号：CN201010597139.0
申请日：2010-12-10
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F17/30
Abstract: 本发明方法是基用一种二级映射的方法来实现满足负载均衡的动态扩展技术。即首先在第一维对集群的数据按照hash方法进行负载的均衡分布，这是第一级映射。在第一维的基础上采用一个M:N的映射表来进行第二级的映射，从而在第一维实现数据的分布负载均衡，在第二维实现集群的动态扩展。本发明使用了二级映射方法，既保留了集群中常用的hash分发方法的数据分布负载均衡特点，又支持了动态扩展的需要。同时利用了元数据库的事务特性保证了对二级映射表更新时的读写隔离性，保证了扩展的动态在线。和静态扩展技术动辄需要停机几分钟相比，本发明不仅不需停止应用业务，而且操作简单，每扩展一个节点的时间在秒级。
-
公开(公告)号：CN102402617A
公开(公告)日：2012-04-04
申请号：CN201110436693.5
申请日：2011-12-23
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F17/30
Abstract: 本发明涉及一种利用分片及稀疏位图的易压缩数据库索引存储系统及其相应的构建、调度和查询处理方法。所述索引存储系统具体包括分片的数据存储结构，以及针对分片数据的稀疏哈希位图索引存储结构，稀疏哈希位图为对需索引数据的概要知识，也可扩充为对分片数据特征的其他概要提取方法。本发明涉及的过滤索引系统和构建、查询处理方法可以实现对海量数据高效的等值查询，大大减少对数据的磁盘读写次数，并且索引空间占用量极小，相对于B+树索引更适用于历史海量数据的查询，且基于此系统及方法能够方便的实现对数据库和索引的压缩存储，并能过滤分片压缩包从而极大减小压缩数据库的解码开销。
-
公开(公告)号：CN102063502A
公开(公告)日：2011-05-18
申请号：CN201110001385.X
申请日：2011-01-06
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F17/30
Abstract: 一种实现异构数据库数据同步的方法，其中异种数据库包括数据库A和数据库B，数据库A是用户应用所使用的数据库，数据库访问接口使用JDBC接口，数据库B是进行数据同步的目的数据库；还包括符合SUN规范的JDBC驱动AB，所述驱动AB包含A的JDBC驱动包和B的JDBC驱动包；对驱动AB上的函数调用都被原样传递给数据库A的JDBC驱动，而对数据库有更改的函数调用，则经过sql语法映射转换后，再传递给数据库B的JDBC驱动。
-
公开(公告)号：CN117131058A
公开(公告)日：2023-11-28
申请号：CN202311369907.0
申请日：2023-10-23
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F16/22 , G06F9/50 , G06F16/242
Abstract: 本发明公开一种基于数据分片的并行对比数据库表数据的方法，本发明涉及数据对比领域，设置对应的线程池和两端数据库，所述两端数据库用于储存相关的数据信息；通过线程池采集两端数据库中需要对比的数据信息，生成表对任务；分析表对任务是否需要进行分片处理，根据分析结果对其进行分片处理；将分片处理的数据进行拼接整合，组成新的任务对；将所组成的任务对通过线程池进行查询，根据查询结果组成数据对任务；设置数据对比引擎，将数据对任务通过数据对比引擎进行对比分析，输出对比结果；本发明的有益效果为在一定程度上降低了数据量的粒度，提高了并行度和对比效率。
-
公开(公告)号：CN116360709B
公开(公告)日：2023-08-08
申请号：CN202310629133.4
申请日：2023-05-31
Applicant: 天津神舟通用数据技术有限公司
IPC: G06F3/06
Abstract: 本发明提供一种数据存取系统，包括，第一SSD缓存阵列，包括多个并联的SSD存储器；处理器，分别连接到多个并联的SSD存储器；第二双SSD目录备份存储器，包括两个互为备份的SSD存储器，且与第一SSD缓存阵列相连；第一HDD磁盘阵列，包括多个HDD磁盘，用于存储数据；多个传感器，用于探测SSD存储器和HDD磁盘的状态数据；性能管理单元，包括第一接口，分别连接到第一SSD缓存阵列中的每个SSD存储器；第三接口，分别连接到第一HDD磁盘阵列中的每个HDD磁盘；第二接口，与处理器相连；第四接口，连接到多个传感器，获取传感器探测的状态数据；第五接口，连接到第二双SSD目录备份存储器。
-
-
-
-
-
-
-
-
-
Search Results
27
records
(took 0.028 seconds)
