(19)中华人民共和国国家知识产权局
(12)发明专利申请
(21)申请号 CN201310330472.9 (22)申请日 2013.07.31
(71)申请人 东南大学;山东科技大学
地址 210096 江苏省南京市四牌楼2号
(10)申请公布号 CN103366015A
(43)申请公布日 2013.10.23
(72)发明人 宋爱波;宋爱美;李龙生
(74)专利代理机构 南京苏高专利商标事务所(普通合伙)
代理人 柏尚春
(51)Int.CI
权利要求说明书 说明书 幅图
(54)发明名称
一种基于Hadoop的OLAP数据存储与查询方法
(57)摘要
本发明公开了一种基于Hadoop的OLAP海
量数据的存储与查询方法,在数据存储上,首先定义了新的列文件存储格式HCFile,然后给出了基于HCFile的数据表存储方法,在该方案中,读取一列数据只需读取若干HCFile,无需访问其它列数据,I/O效率与按行存储相比大大提高;同时,添加一列数据只需添加新的文件,极易扩展。在聚集计算上,首先创建了基于倒排结构的数据索引,然后利用MapReduce实现了OLAP的基
本聚集计算,包括求和、最大/最小值和计数等,其它聚集计算可由这些基本聚集计算实现,得益于高效的数据索引,聚集计算的性能显著提升。本发明与现有技术相比,不仅有效的提高了数据存储与查询的效率,而且节省了硬件资源,降低了时间和硬件成本,同时,运用更方便灵活。
法律状态
法律状态公告日
2013-10-23 2013-10-23 2013-11-20 2013-11-20 2016-04-27 2016-04-27 2019-07-19
法律状态信息
公开 公开
实质审查的生效 实质审查的生效 授权 授权 专利权的终止
法律状态
公开 公开
实质审查的生效 实质审查的生效 授权 授权 专利权的终止
权利要求说明书
一种基于Hadoop的OLAP数据存储与查询方法的权利要求说明书内容是....请下载后查看