大数据性能测试方案.docx

编号：
密级：
XXX大数据平台
性能测试方案
[V1-]
拟制人：
审核人：
批准人：
[2016 年 06 月 08 日]
文件变更记录
*A -增加 M -修订 D -删除
版本号
日期
变更类型
，redpower服务器运行情况
前置条件
操作步骤
.准备数据容量100G
.对redpower服务器进行资源监控
.客户端执行Hadoop/ Spark的读取代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
场景2:数据容量500G时，进行读取算法的基准测试
用例名称
数据量500G,读取功能的基准测试
算法
读取
验证功能
Hadoop/ Spark的读取测试
测试目的
对比Hadoop/ Spark的读取算法，进行数据容量 500G读取操作时，redpower服务器运行情况
前置条件
操作步骤
.准备数据容量500G
.对redpower服务器进行资源监控
.客户端执行Hadoop/ Spark的读取代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
场景3:数据容量1T时，进行读取算法的基准测试
用例名称
数据量1T,读取功能的基准测试
算法
读取
验证功能
Hadoop/ Spark的读取测试
测试目的
对比Hadoop/ Spark的读取算法，进行数据容量1T读取操作时，redpower服务器运行情况
前置条件
操作步骤
.准备数据容量1T
.对redpower服务器进行资源监控
.客户端执行Hadoop/ Spark的读取代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
Hadoop/ Spark写入算法的基准测试
场景1:数据容量100G时，进行写入算法的基准测试
用例名称
数据量100G,写入功能的基准测试
算法
写入
验证功能
Hadoop/ Spark的写入测试
测试目的
对比Hadoop/ Spark的写入算法，进行数据容量100G写入操作时，redpower服务器运行情况
前置条件
操作步骤
.准备数据容量100G
.对redpower服务器进行资源监控
.客户端执行Hadoop/ Spark的写入代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
场景2:数据容量500G时，进行写入算法的基准测试
用例名称
数据量500G,写入功能的基准测试
算法
写入
验证功能
Hadoop/ Spark的写入测试
测试目的
对比Hadoop/ Spark的写入算法，进行数据容量 500G写入操作时，redpower服务器运行情况
前置条件
操作步骤
.准备数据容量500G
.对redpower服务器进行资源监控
.客户端执行Hadoop/ Spark的写入代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
场景3:数据容量仃时，进行写入算法的基准测试
用例名称
数据量1T,写入功能的基准测试
算法
写入
验证功能
Hadoop/ Spark的写入测试
测试目的
对比Hadoop/ Spark的写入算法，进行数据容量1T写入操作时，redpower服务器运行情况
前置条件
操作步骤
.准备数据容量1T
.对redpower服务器进行资源监控
.客户端执行Hadoop/ Spark的写入代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
Hadoop/ Spark导入算法的基准测试