好文档 - 专业文书写作范文服务资料分享网站

一种基于Hadoop的OLAP数据存储与查询方法

天下 分享 时间: 加入收藏 我要投稿 点赞

(19)中华人民共和国国家知识产权局

(12)发明专利申请

(21)申请号 CN201310330472.9 (22)申请日 2013.07.31

(71)申请人 东南大学;山东科技大学

地址 210096 江苏省南京市四牌楼2号

(10)申请公布号 CN103366015A

(43)申请公布日 2013.10.23

(72)发明人 宋爱波;宋爱美;李龙生

(74)专利代理机构 南京苏高专利商标事务所(普通合伙)

代理人 柏尚春

(51)Int.CI

权利要求说明书 说明书 幅图

(54)发明名称

一种基于Hadoop的OLAP数据存储与查询方法

(57)摘要

本发明公开了一种基于Hadoop的OLAP海

量数据的存储与查询方法,在数据存储上,首先定义了新的列文件存储格式HCFile,然后给出了基于HCFile的数据表存储方法,在该方案中,读取一列数据只需读取若干HCFile,无需访问其它列数据,I/O效率与按行存储相比大大提高;同时,添加一列数据只需添加新的文件,极易扩展。在聚集计算上,首先创建了基于倒排结构的数据索引,然后利用MapReduce实现了OLAP的基

本聚集计算,包括求和、最大/最小值和计数等,其它聚集计算可由这些基本聚集计算实现,得益于高效的数据索引,聚集计算的性能显著提升。本发明与现有技术相比,不仅有效的提高了数据存储与查询的效率,而且节省了硬件资源,降低了时间和硬件成本,同时,运用更方便灵活。

法律状态

法律状态公告日

2013-10-23 2013-10-23 2013-11-20 2013-11-20 2016-04-27 2016-04-27 2019-07-19

法律状态信息

公开 公开

实质审查的生效 实质审查的生效 授权 授权 专利权的终止

法律状态

公开 公开

实质审查的生效 实质审查的生效 授权 授权 专利权的终止

权利要求说明书

一种基于Hadoop的OLAP数据存储与查询方法的权利要求说明书内容是....请下载后查看

一种基于Hadoop的OLAP数据存储与查询方法

(19)中华人民共和国国家知识产权局(12)发明专利申请(21)申请号CN201310330472.9(22)申请日2013.07.31(71)申请人东南大学;山东科技大学地址210096江苏省南京市四牌楼2号(10)申请公布号CN103366015
推荐度:
点击下载文档文档为doc格式
5rjqn1wlp4862m61dk4v721et5ixw1005k2
领取福利

微信扫码领取福利

微信扫码分享