摘要：本发明涉及一种分布式系统高负载情况下的多路径心跳检测方法，其技术特点是包括同步运行的独立心跳检测方法、业务功能心跳检测方法和对端主动应答心跳检测方法，如果任何一种心跳检测方法结果是正常的，则本轮心跳检测结果是正常的。本发明设计合理，其融合了高频检测、长超时时间、多路径检测的心跳检测方法，通过独立的心跳检测、业务功能、对端主动应答以及动态识别超时事件等方法，可以在较短的时间内识别出心跳故障状态，又可以在系统高压力下应对系统误判心跳故障问题，极大提升了数据库的稳定性和可用性。

摘要：本发明涉及一种MPP并行数据库实例级副本均衡方法，其技术特点是存储IO的均衡策略为每个WAL日志配置单独存储硬盘，为业务数据配置一个共享的大容量存储硬盘；物理内存的均衡策略采用动态的数据页面缓冲区分配方式；计算资源的均衡策略采用自适应工作方式；回切原主实例策略包括平滑模式rebalance和速度模式rebalance以满足不同的场景需求。本发明充分考虑MPP并行数据库中并行计算、批量装载数据以及一次写入多次查询的特点，分别从存储IO、物理内存、计算资源和回切原主实例这四个方面进行实例级副本的均衡，最终实现了在不妥协从实例的冗余能力的基础上最大化主实例的计算服务能力。

摘要：本发明涉及一种基于列式存储的流水排序方法，其技术特点是包括异步IO线程、流水化线程和排序线程，其根据所有CU的元信息构建CU序列，并根据CU序列的最小值信息构造边界序列，在排序过程中，将CU视为一个数据集合，对于相邻的两个CU，使用后一个CU的最小值做边界将数据划分为两部分，前一部分可以作为子集合单独排序，后一部分和第二个CU组成一个新的集合，再和后面的CU继续进行相同的处理，实现流水排序。本发明设计合理，实现了对采用列式存储并且近似有序的数据集合进行快速排序功能，具有处理速度快、占用资源小等特点。

摘要：本发明涉及一种神通数据库三层缓存段搜索管理结构及页面查找方法，其技术特点是包括线程级缓存、段搜索全局缓存和物理空间；线程级缓存是一个线程的局部缓存；段搜索全局缓存包括全局缓存结点及全局缓存结点管理的一批空闲页面项，每个缓存结点管理的页面项按照空闲空间档位组织成多级链表；物理空间采用PFS页面进行管理，段内所有PFS页面均为多叉树状结构，一个PFS页面管理若干个数据页面，每个PFS页面记录一批数据页面以及它们的空间空闲值。本发明设计合理，提高了多线程并发查找页面的性能，有效地提高了并发性和吞吐率，解决了每次查找页面时都去访问段的PFS树造成大量I/O以及多个线程并发对PFS树进行搜索时产生的资源竞争的问题。

摘要：本发明涉及一种基于Oracle数据库协议代理的应用移植方法，其技术特点是使用TNS协议代理程序对原Oracle网络进行拦截及监听；建立应用与TNS协议代理程序之间的连接、TNS协议代理程序与神通数据库之间的连接以及两个连接的映射关系；应用客户端通过TNS协议代理程序进行认证授权；认证授权后，TNS协议代理程序解析应用客户端发送的数据包并转发给神通数据库处理，神通数据库处理后通过TNS协议代理程序将处理结果发送给Oracle驱动。本发明采用将通信协议翻译转换为与神通数据库之间的协议模式，有效地解决了缺少应用系统源码难以进行移植的问题，并且任何语言开发的应用系统都可以访问神通数据库，提高了开发效率、降低了开发难度、扩大了应用范围。

摘要：本发明涉及一种基于路径推进的分布式死锁检测方法，包括步骤1、各个节点启动时，创建死锁检测线程和死锁检测队列；步骤2、锁模块发起远程锁请求，将请求信息加入死锁检测队列；步骤3、死锁检测线程定时遍历死锁检测队列，发起死锁检测请求；步骤4、死锁检测进程将死锁检测请求发送到目标节点；步骤5、目标节点接收到死锁检测请求后，进行死锁检测请求处理；步骤6、发起检测请求的死锁检测线程接收目标节点返回信息并处理；步骤7、检测到死锁，唤醒请求信息所属的线程，解开等待链，继续执行步骤3。本发明每个节点都可以执行死锁检测任务，能够快速检测出系统中发生的死锁，同时避免死锁检测单点故障，保证了数据库系统的正常运行。

摘要：本发明涉及一种基于锁状态缓存的分布式锁管理器的实现方法，包括步骤1、上层模块调用锁模块，进入锁模块并进行快速加锁；步骤2、检查是否有其他事务已经持有锁，处理锁冲突；步骤3、等待本节点事务放锁；步骤4、向主节点请求加锁，主节点处理加锁请求；步骤5、向持有锁的远程节点请求放锁，从节点处理放锁请求；步骤6、加锁成功，记录加锁信息并返回到上层模块。本发明设计合理，其通过主节点锁管理器和从节点锁状态缓存方式，即可以协调各个节点的加锁请求，保证数据库的一致性，又利用了数据库事务DML操作为主的特性，即节点上的锁状态缓存在大部分情况下都是有效的，有效减少了远程节点的访问开销，提高了加锁效率。

摘要：本发明涉及一种基于页面更新序号的数据库集群多节点重做日志恢复方法，包括以下步骤：在页面头部分配空间作为页面更新序号；集群中所有的节点在更新数据页面时，更新页面更新序号和本节点的重做日志；重新启动数据库集群，最先启动的节点成为主节点，由主节点进行实例恢复；主节点从共享磁盘加载控制文件，从控制文件中读取每一个节点的重做日志信息作为扫描句柄，保存在扫描句柄数组中；遍历所有的扫描句柄，恢复重做日志；所有扫描句柄已经扫描完毕，重做日志恢复结束。本发明在新增重做日志和在实例恢复时，利用页面更新序号判断页面是否连续，将相同页面在不同节点之间的修改按序恢复，保证数据的一致性，提高了系统运行的可靠性。

摘要：本发明涉及一种基于更新序列的分布式锁状态同步方法，其主要技术特点是：在每个从节点锁对象上设置更新序列，主节点维护各个从节点持有锁状态的记录，并在每个记录上设置更新序列；从节点向主节点发送加锁请求；主节点根据请求节点锁状态进行加锁处理，返回加锁成功消息，或者向当前持有锁的冲突节点发送放锁请求；从节点收根据从节点锁状态进行放锁处理并返回放锁成功消息；主节点检查冲突节点锁状态当前的更新序列，再次尝试加锁处理；从节点检查锁状态当前的更新序列并再次尝试加锁。本发明设计合理，能够有效地维护各个节点之间锁状态的一致性，保证了数据库服务的正常运行，防止数据库服务的中断，提高了系统运行的安全性和可靠性。

摘要：本发明涉及一种车联网大数据跨域分析融合方法，其主要技术特点是建立车联网云数据挖掘架构，该车联网云数据挖掘架构包括分布式数据访问引擎、并行挖掘引擎及代理节点和Web服务器集群；采用车联网数据挖掘算法进行数据挖掘；采用共享内存并行计算技术实现共享内存的并行功能。本发明采用由分布式数据访问引擎、并行挖掘引擎、Web服务器集群及代理节点构成的可支持并行计算的云数据挖掘架构，提高了面向海量数据的支撑能力；通过数据预处理技术、不确定数据预处理技术车联网行业数据处理与融合技术，优化流数据等车联网特有数据的支持；基于车联网流数据的挖掘、分析、聚类技术、行为识别、异常检测等新型数据挖掘算法，提升系统的智能化水平。

摘要：本发明涉及一种基于内存多级缓存的数据快速分页查询访问的方法,包括以下步骤：在数据库启动时，创建一张哈希表作为全局缓存结构；在事务开始时，创建一张哈希表作为该事务的局部缓存结构；在事务进行的过程中，完成表更新操作；当一个事务发起表的总行数查询时，以OID为键在全局缓存结构中查找表的总行数，以OID为键在事务局部缓存结构中查找当前事务影响该表的变化行数，两个数值相加作为此次查询表的总行数；在事务提交时，数据库系统将更新过的当前事务局部缓存结构中各个表的变化行数累加到全局缓存结构中相应表的总行数上。本发明设计合理，大大减少并发冲突，同时最大限度减少了内存中表的总行数的维护对表的更新性能产生的影响。

摘要：本发明涉及一种基于JDBC分发器的数据库读写分离集群实时一致性方法，包括以下步骤：应用程序调用神通数据库JDBC驱动建立数据库连接时，由神通数据库JDBC驱动创建读写分离分发器；应用程序通过神通数据库JDBC在已建立的数据库连接上发送SQL语句，读写分离分发器对输入的SQL语句进行分析，生成执行策略：如果是主机执行策略，则读写分离分发器将SQL语句分发到主机执行并返回执行结果，如果是备机执行策略，则读写分离分发器将SQL语句分发到备机执行并返回执行结果。本发明设计合理，既可以通过备份服务分担主机的负载，又保证了数据查询的一致性，用户应用程序可以在不做任何修改的情况下直接利用读写分离系统提高并发性。

摘要：本发明涉及一种基于异或校验与日志恢复的数据库页面高效容错方法,包括以下步骤：计算数据页面对应的校验码并保存在数据页面的头部中；从存储介质中读取数据页面到内存中时，通过校验码判断数据页面是否损坏；在启动数据库进行实例恢复的过程中，则将数据损坏页面跳过以使数据库正常启动，启动后提醒用户在哪个数据库对象中出现了数据页面损坏；启动数据库成功之后，确定哪个表出现了页面损坏问题，用户通过专门的SQL来对该表的损坏页面进行处理。本发明设计合理，其在数据页面内存储数据页面的异或运算校验码用于实时检测页面是否出现损坏，可成功恢复已损坏的数据，减少用户的数据损失。

摘要：本发明涉及一种基于MPP的并行数据挖掘系统及其实现方法，其主要技术特点是：该系统包括一个挖掘引擎节点和多个分布式的挖掘代理节点，该方法是：挖掘引擎节点将当前数据挖掘任务分配给数据挖掘任务负载较少的挖掘代理节点，将其作为该数据挖掘任务的Master挖掘代理节点；Master挖掘代理节点采用数据分布的负载均衡及就近挖掘策略并向挖掘代理节点分发挖掘任务；每个挖掘代理节点按照分配的子任务执行Slaver算子,每个Slaver算子只进行其分配到的数据块的处理。本发明采用MPP方法并结合数据挖掘的特点，实现对海量数据的高速有效地处理，解决了传统数据挖掘软件处理数据量小，运行速度慢的问题，大大提高了数据挖掘算法处理海量数据的效率和数据承载能力。

摘要：本发明涉及一种基于任务驱动和双缓冲机制的并行排序方法，其主要技术特点是：包括步骤1：分块内存排序步骤：将外存文件划分成一定大小的微小桶并读入内存，每读入一个微小桶就对其进行快速排序，当没有更多内存可用或者没有更多数据时，对所有微小桶进行内存归并，然后写出到外存中，形成一个有序的桶；步骤2：外存归并步骤：对外存中的桶进行归并，并将归并结果输出到最终有序的文件中，生成有序的排序结果。本发明通过任务驱动多线程工作并利用双缓冲技术提高内部排序的性能，简化了并发控制的机制，加快了处理速度，增加了大数据量排序算法的可扩展性。

摘要：本发明涉及一种数据库集群的并行压缩海量数据装载方法，其主要技术特点是：包括步骤1：建立包括数据装载工具、驱动程序和数据库集群的并行压缩海量数据装载的组件架构；步骤2、客户端通过数据装载工具和驱动程序向数据库集群发送数据装载命令，获取各个数据库节点的连接信息后，连接各个数据库并且发送需要装载的数据；数据库集群服务器给客户端提供集群各个数据库节点的连接信息以及各个表的相关信息；数据库节点接收客户端发送过来的数据并存储下来。本发明使用海量数据通信协议以及并行优化处理和压缩优化处理方法，充分利用服务器的多CPU和网络资源并融合在海量数据装载过程中，提升了数据库集群的搭建速度。

摘要：本发明公开了一种基于数据库行列混合存储的多规则复合压缩方法。结合当前软硬件发展趋势以及数据库业界所面临的严重性能瓶颈，提出了将数据库内数据按元组行组织、按属性列压缩的混合存储压缩模式，既具备了列存储高压缩率的特性同时兼具行存储便于随机定位访问的优点。同时针对不同的数据分布特点提出了多种属性列内的规则编码方法，尤其针对数据库单表内各属性列间可能存在的关系提出了列间压缩规则，结合后端的通用压缩算法，能够高效的为上层数据库应用提供多级别的复合压缩功能，并保证在指定压缩率条件下最大化编解码速度。

摘要：本发明公开一种用于海量存储查询专用数据库的多版本存储引擎系统及其相关处理的实现方法。所述存储引擎系统包括：数据存储模块，用于存储压缩数据包；索引模块，用于存储和处理知识网格索引；数据缓存模块，用于存储插入数据；和修改存储区模块，用于存储事务对数据包的修改记录；其特征在于：将数据分块压缩成数据包存储，将数据的版本信息和修改记录存储在一个修改存储区中。这些模块构成了这个多版本存储引擎的整体框架，在这个框架的基础上本发明设计和实现了一系列查询处理和版本信息处理相关的关键算法，从而实现了多版本控制技术。通过这个多版本存储引擎，本发明使得该数据库支持了多版本操作，显著地提高了数据库系统的并发度，实现了数据库系统性能的极大提升。

摘要：本发明涉及一种数据库子串过滤索引系统及其构建、查询方法，其技术特点是：该子串过滤索引系统包括将导入数据进行分片数据存储并从每个分片数据中提取出描述分片数据的子串特征构建一个或多个子串特征过滤位图的分片式数据存储模块，以及用于存储以子串特征过滤位图为子串特征索引的过滤索引存储模块，还包括该子串过滤索引系统的构建和查询方法。本发明设计合理，解决了传统索引空间占用大、压缩数据难以索引的的问题，实现了对海量文本数据高效的子串、关键字查询功能，大大减少了对数据的磁盘读写次数，提升了数据库的全表扫描性能。

摘要：本发明涉及一种基于文件的数据库同步方法，其主要技术特点是：采用在源端数据库安装数据同步工具组件，并且在目标端数据库安装ETL服务组件，ETL服务组件与数据同步工具组件之间通过协议控制并以文件方式从源端数据库向目标端数据库进行同步。本发明设计合理，以文件方式快速地从源端数据库向目标端数据库进行数据库同步，能高效地保存所要同步的数据库数据，并且在异构数据库和操作系统环境中，均能解析文件进行数据的同步操作，从而支持向多种异构数据库进行同步的特性，同时，采用全量同步和增量同步方法，提高了数据库同步效率。