一种数据持久化方法和装置

发明专利有效专利

申请号：
CN201810158889.4
IPC分类号：G06F17/30
申请日期：
2018-02-24
申请人：
国家计算机网络与信息安全管理中心

基础信息

权利要求

说明书

PDF全文

法律信息

引证文献

著录项信息

专利名称	一种数据持久化方法和装置
申请号	CN201810158889.4	申请日期	2018-02-24
法律状态	实质审查	申报国家	中国
公开/公告日	2018-09-11	公开/公告号	CN108519987A
优先权	暂无	优先权号	暂无
主分类号	G06F17/30 ? IPC结构图谱： G 物理 G0 仪器 G06 计算；推算；计数 G06F 电数字数据处理（基于特定计算模型的计算机系统入G06N） G06F17/00 特别适用于特定功能的数字计算设备或数据处理设备或数据处理方法〔6〕 G06F17/30 信息检索；及其数据库结构〔6〕	IPC分类号	G;0;6;F;1;7;/;3;0查看分类表>
申请人	国家计算机网络与信息安全管理中心	申请人地址	北京市朝阳区裕民路甲3号变更专利地址、主体等相关变化，请及时变更，防止失效
权利人	国家计算机网络与信息安全管理中心	当前权利人	国家计算机网络与信息安全管理中心
发明人	马秉楠;吕雁飞;白堃;张鸿;刘欣然;惠榛
代理机构	工业和信息化部电子专利中心	代理人	李勤媛

摘要

本发明公开了一种数据持久化方法和装置。该方法包括：从Kafka中的预设Topic内，获取预先被转换为统一数据类型的数据；选择目标存储引擎；通过Flume将所述Topic内的数据加载到所述目标存储引擎，以便对所述数据执行持久化操作；其中，在所述目标存储引擎执行持久化操作之前，将所述数据从统一数据类型转换为所述数据原来的数据类型。本发明提供一种基于Kafka和Flume的支持多存储引擎的数据持久化方法，在本发明中，使用同一数据类型，通过一次数据序列化(转换为统一数据类型)实现了多存储引擎的统一加载，通过一次反序列化(转换为原数据类型)，实现多存储引擎的高效数据持久化。

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有引用任何外部专利数据！

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有被任何外部专利所引用！

我浏览过的专利

专利服务由北京酷爱智慧知识产权代理公司提供