XXX企业大数据测试用例及报告

XXX企业大数据测试用例及报告

1

目 录

1

系统性能指标和测试结果说明 ................................................................................................ 4 1.1

性能测试报告 ....................................................................................................................... 4

1.1.1 测试目标 .......................................................................................................................... 4 1.1.2 测试内容 .......................................................................................................................... 4 1.1.3 测试环境 .......................................................................................................................... 4 1.1.4 测试过程和结果 .............................................................................................................. 6

1.2

TPC-DS测试报告................................................................................................................ 9

1.2.1 测试目标 .......................................................................................................................... 9 1.2.2 测试内容 .......................................................................................................................... 9 1.2.3 测试环境 ........................................................................................................................ 11 1.2.4 测试过程和结果 ............................................................................................................ 12

1.3

量收迁移验证性测试报告 ................................................................................................. 13

1.3.1 测试目标 ........................................................................................................................ 13 1.3.2 测试内容 ........................................................................................................................ 13 1.3.3 测试环境 ........................................................................................................................ 14 1.3.4 串行执行情况 ................................................................................................................ 14 1.3.5 并行执行情况 ................................................................................................................ 16 1.3.6 生产表数据规模 ............................................................................................................ 17 1.3.7 测试结果 ........................................................................................................................ 19

1.4

某银行性能测试报告 ......................................................................................................... 19

1.4.1 测试目标 ........................................................................................................................ 19

2

1.4.2 测试内容 ........................................................................................................................ 19 1.4.3 测试环境 ........................................................................................................................ 19 1.4.4 测试过程和结果 ............................................................................................................ 20

2

系统测试 ................................................................................................................................ 32 2.1 2.2 2.3

系统测试方法 ..................................................................................................................... 32 系统测试阶段 ..................................................................................................................... 33 系统测试相关提交物 ......................................................................................................... 34

3

1 系统性能指标和测试结果说明

1.1 性能测试报告

1.1.1 测试目标

运营商手机上网记录查询系统案例，以某运营商为例，日均上网记录数近10亿条，每月数据量近9TB，移动互联网用户快速增加，智能终端迅速普及、户均流量显著增长，上网记录数据将进一步猛增，每6个月，流量翻一番，如此大的数据量已经超越了传统关系型数据库可管理的容量上限，关系型数据库上对大规模数据进行操作会造成系统性能严重下降。

通过本测试，验证星环科技成熟稳定的商用Hadoop平台，是否可以有效解决数据采集、加载、存储、查询、分析等问题。

1.1.2 测试内容

1）存储节点数和存储量验证； 2）并发加载数据的效率验证；

3）分别选取简单查询（短信话单查询），单表统计（某天某客户通话次数），大表关联统计（统计指定用户的上网记录）三个应用场景验证产品性能。

1.1.3 测试环境

软硬件环境配置如下：

4

表9-1 服务器配置

服务器 节点数量 CPU 内存 推荐配置及说明 300+台服务器 两路6核处理器2*E5-2620 64GBECCDDR3 2个600G的SAS硬盘，15000RPM，RAID1，作为系统盘 硬盘 12个2TB的SATA硬盘，7200RPM，不做RAID1 网络 部署环境如下：

表9-2 集群配置

PC服务器 NameNode节点 DataNode节点 Zookeeper节点 集群监控节点 入库服务节点 Web查询应用服务节点 网络拓扑情况如下：

300多台 3台 278台 7台 1台 24台 20台 双电口万兆（10Gbps）以太网卡 5