加载中...
首页专利查询专利详情

*来源于国家知识产权局数据,仅供参考,实际以国家知识产权局展示为准

一种基于Hadoop的大数据索引快速创建方法

发明专利无效专利
  • 申请号:
    CN201610837341.3
  • IPC分类号:G06F17/30
  • 申请日期:
    2016-09-21
  • 申请人:
    郑州云海信息技术有限公司
著录项信息
专利名称一种基于Hadoop的大数据索引快速创建方法
申请号CN201610837341.3申请日期2016-09-21
法律状态驳回申报国家中国
公开/公告日2017-02-22公开/公告号CN106446145A
优先权暂无优先权号暂无
主分类号G06F17/30IPC分类号G;0;6;F;1;7;/;3;0查看分类表>
申请人郑州云海信息技术有限公司申请人地址
河南省郑州市郑东新区心怡路278号16层1601室 变更 专利地址、主体等相关变化,请及时变更,防止失效
权利人郑州云海信息技术有限公司当前权利人郑州云海信息技术有限公司
发明人魏金雷;张烨;刘安;孙思清;高传集;臧勇真
代理机构济南信达专利事务所有限公司代理人张靖
摘要
本发明公开了一种基于Hadoop的大数据索引快速创建方法,所述方法通过编写Hbase数据字段与需建索引字段之间的映射xml文件,针对需拼接或需修改的数据,读取映射文件,相应数据组织成索引格式,利用分布式Hadoop集群的并发能力,通过执行MapReduce任务,将大数据自动分拆成数据段到集群中的每个机器中,并行运行。本发明针对目前动辄上亿条的数据建立索引,克服了传统单台机器创建索引时的种种缺点,减少了对高性能服务器的依赖,增强了工作稳定性,本发明有着环境易搭建、处理海量数据速度快且拥有良好的扩展性,具有很好的推广使用价值。

专利服务由北京酷爱智慧知识产权代理公司提供