公开(公告)号：CN117149885A

公开(公告)日：2023-12-01

申请号：CN202311422024.1

申请日：2023-10-31

Applicant: 天津神舟通用数据技术有限公司

Inventor： 刘碧楠 ,  何清法 ,  周勇亮 ,  李彬 ,  于凯 ,  顾云苏 ,  周丽霞 ,  胡薇 ,  吴嵩

IPC: G06F16/25 ,  G06F16/23 ,  G06F16/242 ,  G06F16/2458 ,  G06F16/27

Abstract: 本发明公开了一种基于数据库主节点转发的读写分离实现方法，包括：步骤1：数据库主节点接收应用程序发送过来的SQL语句；步骤2：对SQL语句进行语法解析和语义分析，获得SQL语句类型以及操作的对象ID；步骤3：判断SQL语句是否为只读操作；步骤4：如果是，将SQL语句发送到从节点执行，等待接收到从节点执行结果后返回客户端；否则，直接在主节点执行SQL语句，将执行结果返回客户端；步骤5：如果不是，在主节点执行SQL语句；记录SQL语句更新的所有对象的ID；事务提交时，将本事务更新过的所有对象ID对应的LSN设置为本事务的提交LSN，供后续只读语句执行到步骤4时使用。因此主数据库可以专注于处理写操作，从而提高了写操作的性能和响应时间。

公开(公告)号：CN117131069A

公开(公告)日：2023-11-28

申请号：CN202311398767.X

申请日：2023-10-26

Applicant: 天津神舟通用数据技术有限公司

Inventor： 李彬 ,  何清法 ,  刘碧楠 ,  周丽霞 ,  马岳 ,  刘爱莉 ,  顾云苏 ,  吴嵩 ,  赵冬伟 ,  胡薇

IPC: G06F16/242 ,  G06F16/22 ,  G06F16/2455

Abstract: 本发明公开一种数据库单表分组扫描方法，包括：步骤S1：在SQL语句中提供分组数量和当前要获取的分组序号；步骤S2：启动分组扫描begin阶段，得到当前页面；步骤S3：启动分组扫描next阶段，从分组扫描获取PFS页面；步骤S4：分组扫描返回有效PFS页面则执行步骤S6，否则执行步骤S5；步骤S5：分组扫描已经结束，结束堆扫描；步骤S6：当前PFS页面是否存在下一个有效范围，是则继续，否则执行步骤S3；步骤S7获取有效范围，解析8个页面上的所有行，并将所有行放到待发送缓冲区；步骤S8将缓冲区中的数据发送给前端，并回到步骤S6。本发明对表中数据进行跳跃式分组访问为并行获取数据库单表数据提供支撑。

公开(公告)号：CN102004799B

公开(公告)日：2012-10-03

申请号：CN201010609540.1

申请日：2010-12-28

Applicant: 天津神舟通用数据技术有限公司

Inventor： 徐岩 ,  何清法 ,  蒋志勇 ,  李阳 ,  顾云苏 ,  冯柯 ,  谢卫平 ,  孟勃荣 ,  关刚 ,  车晓瑶

IPC: G06F17/30

Abstract: 本发明涉及一种数据库冗余数据一致性检验方法，包括如下步骤：数据库主服务器接收到用户操作请求后确认相关备份服务器；数据库主服务器将用户操作请求发送至备份服务器列表中的各备份服务器；各备份服务器执行用户操作请求得到操作结果；各备份服务器计算操作结果的语义校验码；各备份服务器将操作结果和相应的语义校验码发送到校验服务器；校验服务器对操作结果和语义校验码后进行校验并将操作结果或错误信息发送给数据库主服务器；数据库主服务器将接收到的操作结果或错误信息转发给用户。本发明克服了物理层检验方法的局限性，能直接针对执行结果进行检验，有效地降低了需要进行检验操作的数据量，也降低小了检验操作的系统资源消耗。

公开(公告)号：CN102033938B

公开(公告)日：2012-06-06

申请号：CN201010597139.0

申请日：2010-12-10

Applicant: 天津神舟通用数据技术有限公司

Inventor： 李阳 ,  何清法 ,  顾云苏 ,  冯柯 ,  蒋志勇 ,  徐岩 ,  谢卫平 ,  李晓鹏 ,  刘荣 ,  贾宗秀

IPC: G06F17/30

Abstract: 本发明方法是基用一种二级映射的方法来实现满足负载均衡的动态扩展技术。即首先在第一维对集群的数据按照hash方法进行负载的均衡分布，这是第一级映射。在第一维的基础上采用一个M:N的映射表来进行第二级的映射，从而在第一维实现数据的分布负载均衡，在第二维实现集群的动态扩展。本发明使用了二级映射方法，既保留了集群中常用的hash分发方法的数据分布负载均衡特点，又支持了动态扩展的需要。同时利用了元数据库的事务特性保证了对二级映射表更新时的读写隔离性，保证了扩展的动态在线。和静态扩展技术动辄需要停机几分钟相比，本发明不仅不需停止应用业务，而且操作简单，每扩展一个节点的时间在秒级。

公开(公告)号：CN102402617A

公开(公告)日：2012-04-04

申请号：CN201110436693.5

申请日：2011-12-23

Applicant: 天津神舟通用数据技术有限公司

Inventor： 蔡华林 ,  曹晖 ,  冯柯 ,  何清法 ,  顾云苏 ,  王嘉春 ,  毛云青 ,  徐昶 ,  李阳 ,  周宇

IPC: G06F17/30

Abstract: 本发明涉及一种利用分片及稀疏位图的易压缩数据库索引存储系统及其相应的构建、调度和查询处理方法。所述索引存储系统具体包括分片的数据存储结构，以及针对分片数据的稀疏哈希位图索引存储结构，稀疏哈希位图为对需索引数据的概要知识，也可扩充为对分片数据特征的其他概要提取方法。本发明涉及的过滤索引系统和构建、查询处理方法可以实现对海量数据高效的等值查询，大大减少对数据的磁盘读写次数，并且索引空间占用量极小，相对于B+树索引更适用于历史海量数据的查询，且基于此系统及方法能够方便的实现对数据库和索引的压缩存储，并能过滤分片压缩包从而极大减小压缩数据库的解码开销。

公开(公告)号：CN102063502A

公开(公告)日：2011-05-18

申请号：CN201110001385.X

申请日：2011-01-06

Applicant: 天津神舟通用数据技术有限公司

Inventor： 周宇 ,  徐岩 ,  何清法 ,  冯柯 ,  顾云苏 ,  蒋志勇 ,  李阳 ,  谢卫平 ,  孟勃荣 ,  关刚

IPC: G06F17/30

Abstract: 一种实现异构数据库数据同步的方法，其中异种数据库包括数据库A和数据库B，数据库A是用户应用所使用的数据库，数据库访问接口使用JDBC接口，数据库B是进行数据同步的目的数据库；还包括符合SUN规范的JDBC驱动AB，所述驱动AB包含A的JDBC驱动包和B的JDBC驱动包；对驱动AB上的函数调用都被原样传递给数据库A的JDBC驱动，而对数据库有更改的函数调用，则经过sql语法映射转换后，再传递给数据库B的JDBC驱动。